HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Kafka核心技术概念与架构原理

简介Kafka起初是由LinkedIn公司采⽤Scala语⾔开发的⼀个多分区、多副本且基于ZooKeeper协调的分布式消息系统,现已捐献给Apache基⾦会。⽬前Kafka已经定位为⼀个分布式流式处理平台,它以⾼吞吐、可持久化、可⽔平扩展、⽀持流数据处理等多种特性被⼴泛使⽤。

Kafka的生产集群部署

方案背景假设每天集群需要承载10亿数据。一天24小时,晚上12点到凌晨8点几乎没多少数据。使用二八法则估计,也就是80%的数据(8亿)会在16个小时涌入,而且8亿的80%的数据(6.4亿)会在这16个小时的20%时间(3小时)涌入。QPS计算公式:640000000÷(3x6

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。