HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Kafka源码阅读之:日志段 kafka.log.LogSegment

序言笔者在平时工作中时时都在享受kafka的性能和稳定性,但始终没有机会真正了解kafka的设计思想和设计原理,最近报名了极客时间的一门课,开始坚持阅读kafka源代码。在此期间我也会持续更新自己梳理注释过的源代码。鉴于本人的Scala代码能力有限,加上kafka的代码层次较深,在阅读源

提高您的流数据处理能力—— Greenplum的流计算功能解析

​在追求数据时效性的今天,如何高效处理低延时的流数据,逐渐成为大家越来越关注的问题。 流数据处理能力已经成为衡量大数据平台计算实力的一个重要指标。Greenplum作为最先进的开源大数据平台,天生具备处理复杂问题的优势。Pivotal的研发团队在开源Greenplum的基础上,提供了新的高速流数据引

Kafka与RabbitMQ、ActiveMQ协议区别

对于Kafka与RabbitMQ、ActiveMQ协议,它们具体的区别如下:activemq:    activemq支持主从复制、集群。但是集群功能看起来很弱,只有failover功能,即我连一个失败了,可以切换到其他的broker上。这一点貌似不太科学。假设有三个broker,其

深入探秘 Netty、Kafka 中的零拷贝技术!

前言从字面意思理解就是数据不需要来回的拷贝,大大提升了系统的性能;这个词我们也经常在javanio,netty,kafka,RocketMQ等框架中听到,经常作为其提升性能的一大亮点;下面从I/O的几个概念开始,进而在分析零拷贝。I/O概念1.缓冲区缓冲

简易实现kafka延迟消息

背景当前业务存在以下场景:在一个事务内的最后一步是发送kafka消息,消费端收到通知后读取数据并做处理。但是由于kafka几乎是即时收到消息,导致偶尔出现“在发完kafka和提交事务的间隙,消费端收到了消息并读取到了事务提交前的数据”。这个问题可以通过<code延迟消息</c

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。