文章
在Ubuntu机器上部署Kafka消息队列
在Ubuntu机器上部署Kafka消息队列步骤安装依赖ZooKeeper安装Kafka配置Kafka启动和停止Kafka测试Kafka1依赖:安装ZooKeeper<pre<codeaptgetupdate
基于Docker的日志分析平台(三) 快速入门
1.Zookeeper对于<codeZookeeper</code我们用一条简单的命令来测试一下:<pre<codeechoruok|nclocalhost2181</code</pre你应该可以看到:<pre<codeimok</code</pr
基于Docker的日志分析平台(一) 介绍
1.为什么要分析日志传统的Web开发中,日志可能并不被重视,只有应用出现问题后,才会适时性的去看一眼。而且日志的储存方式也很简单,直接写入一个文本文件或者扔到数据库中就了事了。这样对于单机应用来说没有什么不可以的,可是当系统架构分布式后,官网、论坛、社交、交易等各个大大小小的子系统越来
TOP100summit:【分享实录-Microsoft】基于Kafka与Spark的实时大数据质量监控平台
本篇文章内容来自2016年TOP100summitMicrosoft资深产品经理邢国冬的案例分享。编辑:Cynthia邢国冬(TonyXing):Microsoft资深产品经理、负责微软应用与服务集团的大数据平台构建,数据产品与服务.导读:微软的ASG(应用与服务集团)包含Bing,、
怎么用Kafka 实现数据中心到数据中心的复制?
_摘要:每个公司都需要为所有重要系统制定灾难恢复计划。从单个进程到最大的分布式体系结构的小单元都是这样。特别是对于数据库,这通常涉及容错,冗余,定期备份和应急计划的混合。数据库越大,制定好策略就越困难。这篇文章概述了ArangoDB向多数据中心支持的第一个进化步骤数据中心到数据中心的异步复制
聊聊kafka的partition分配
序本文主要研究一下kafka的partition分配,主要是key到parition的映射,partition对consumer的分配,以及partition的replica对broker/machine的分配。1.key到partition的映射在kafka0.8版本
kafka streams的join实例
序本文简单介绍一下kafkastreams的join操作join<blockquote<pAjoinoperationmergestwostreamsbasedonthekeysoftheirdatarecords,andyield
Spring Boot 中使用 kafka
Kafka是一种高吞吐的分布式发布订阅消息系统,能够替代传统的消息队列用于解耦合数据处理,缓存未处理消息等,同时具有更高的吞吐率,支持分区、多副本、冗余,因此被广泛用于大规模消息数据处理应用。Kafka支持Java及多种其它语言客户端,可与Hadoop、Storm、Spark等其它大数据工具结
自定义kafka streams的processor
序本文来解析一下kafkastreams的KStreamBuilder以及举例如何自定义kafkastreams的processor实例<pre<codeKStreamBuilderbuildernewKStreamBuilder();KStrea
kafka stream errorlog报警实例
KafkaAppenderlog4jcore2.7sources.jar!/org/apache/logging/log4j/core/appender/mom/kafka/KafkaAppender.java<pre<codepublicvoidappend(fin
已加载文章中没有匹配内容,试试其他关键词或清空搜索。