文章
Kafka消息系统基础知识索引
我们在《360度测试:KAFKA会丢数据么?其高可用是否满足需求?》(https://link.segmentfault.com/?encx2gjrYhadizydKVEl%2BLuBA%3D%3D.lwRwRDStnyWtqEmHP2prFqqrquksnHc1xQKEmSp87Uuu3OM
供应链业务MQ应用场景经验总结
<blockquote写在前面:做供应链业务一年有余了,这一年里MQ帮我们解决了很多问题,在此做一些经验总结;另外,各个公司消息中间件提供的功能大同小异,最基础的推消息、下游异常重试机制应该是都具备的,本文所述也是建立在这样的能力基础上的~</blockquote场景一:削峰填谷,降低响
kafka docker
基本概念介绍Broker可以简单理解为一个Kafka节点,多个Broker节点构成整个Kafka集群;Topic某种类型的消息的合集;Partition它是Topic在物理上的分组,多个Partition会被分散地存储在不同的Kafka节点上;单个P
kafka
什么是Kafka<blockquoteKafka是一个分布式流处理系统,流处理系统使它可以像消息队列一样publish或者subscribe消息,分布式提供了容错性,并发处理消息的机制。</blockquoteKafka的基本概念<blockquotekafka运行在
【大数据实践】KSQL流处理——如何将多个STREAM输出到一个TOPIC
【大数据实践】KSQL流处理——如何将数据处理结果推到指定Topic需求场景描述在生产环境中,各个业务服务产生的<code事件</code都会被push到<codeKafka</code消息中间件中。如:充值中心的_充值事件_会被push到kafka的<cod
DataPipeline在大数据平台的数据流实践
文|吕鹏DataPipeline架构师!图片描述(/img/bVbjZtp?w1280&h720)进入大数据时代,实时作业有着越来越重要的地位。本文将从以下几个部分进行讲解DataPipeline在大数据平台的实时数据流实践。一、企业级数据面临的主要问题和挑战
kafka连接失败
kafka连接报错问题描述本地测试kafka推送消息,连接失败,错误如下:!clipboard.png(/img/bVbjYzB?w1070&h34)!clipboard.png(/img/bVbjYzC?w1357&h52)
kafka 偏移量相关接口
kafka0.9之前的版本偏移量信息是通过zookeeper管理的;为了避免对zookeeper的过度依赖,每次从kafka上读取topic偏移量信息,连接消耗还是比较大的,从kafka0.9开始,kafka已接管了偏移量信息管理功能,并将各消费组的偏移量写入了__co
分享一些 Kafka 消费数据的小经验
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/9d8b14f56489149b89ad11b2bbe39883.png)前言之前写过一篇《从源码分析如何优雅的使用Kafka生产者》(https://
kafka官方文档翻译(一)
Introduction一个数据流平台有三个关键的功能:发布和订阅记录流,类似于消息队列或企业消息传递系统。以容错的持久方式存储记录流。处理正在发生的记录流。Kafka通常用于两大类应用:构建可在系统或应用程序之间可靠获取数据的实时流数据管道。
已加载文章中没有匹配内容,试试其他关键词或清空搜索。