文章
Kafka 架构设计
Kafka总体架构!image.png(https://uploadimages.jianshu.io/upload_images/6464086848e694c25c2d919.png?imageMogr2/autoorient/strip%7CimageView2/2/w/1240)kafka的总体架构还是遵循消
Kafka 架构分析(1)
本次kafka相关分析总结,以apachekafka为准。地址:http://kafka.apache.org/documentation/(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fkafka.apache.org%2Fdocumentation%2F)中文文档地址:h
Kafka 最佳实践
这是一篇关于Kafka实践的文章,内容来自DataWorksSummit/HadoopSummit(HadoopSummit)上的一篇分享,里面讲述了很多关于Kafka配置、监控、优化的内容,绝对是在实践中总结出的精华,有很大的借鉴参考意义,本文主要是根据PPT的内容进行翻译及适当补充。Kafka的架构这里就不多做介绍了,直接步入正
Kafka 原理和实战
本文首发于vivo互联网技术微信公众号https://mp.weixin.qq.com/s/bV8AhqAjQp4a\_iXRfobkCQ(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fmp.weixin.qq.com%2Fs%2FbV8AhqAjQp4a_iXRfobkCQ
Kafka auto.offset.reset值详解
昨天在写一个java消费kafka数据的实例,明明设置auto.offset.reset为earliest,但还是不从头开始消费,官网给出的含义太抽象了。 earliest:automaticallyresettheoffsettotheearliestoffset,自动将偏移量置为最早的。难道不是topic中各分区的开始?结果
Kafka 0.8的一些变化
之前分享了一个英文版的变化,一直没时间去翻译,今天上了下kafka的官网发现0.8的代码能下载了,更值得关注的是0.8的相关文档也更新上来了,上面的一些变化还是很可喜的,说明这套系统还是有很大的利用价值的。最重要的一个变化体现在一张图上:!(http://static.oschina.net/uploads/space/2013/0709/210
Kafka
1kafka是用于构建实时数据管道和流应用程序。具有横向扩展,容错wickedfast(变态快)等优点.kafka名词解释producer:消息和数据生产者,向kakfa的一个topic发布消息的过程叫做producerconsumers:消息和数据消费者,订阅topics并发处理其发布的消息的过程叫做consumertopic特指
K8s StatfulSet使用总结
StatefulSet:在1.3以前K8s中StatefulSet叫PetSet(宠物集),由此也可看出StatefulSet是关注个体,而非群体。StatefulSet要满足以下几点:稳定且唯一的网络标识符;如:Redis集群,在Redis集群中,它是通过槽位来存储数据的,假如:第一个节点是0~1000,第二个节点是1
Hive基础
Hive架构简介下图是hive的架构图!(https://static.oschina.net/uploads/space/2018/0205/003509_Qw6B_1403215.png)命令执行所有的命令和查询都会进入到Driver,通过这个模块进行解析编译,对需求的计算进行优化。然后按照指定的步
Hive和SparkSQL:基于 Hadoop 的数据仓库工具
Hive前言Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能,将类SQL语句转换为MapReduce任务执行。!image(https://oscimg.oschina.net/oscnet/3ca2e844a74c7004d3281eeec5
已加载文章中没有匹配内容,试试其他关键词或清空搜索。