HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
浅析Kafka面试题
1,浅析消息队列面经这里我们通过讲解一些常见的面试题和其变种的问法来熟悉消息队列中的一些核心的概念,然后深挖其中知识点,以此来进行拓展,在这个文档中最好只是做简单但确的总结性质的语言来讲述,其他完整的回答,根据相应的模块整理起来即可:<blockquote<ul<li<p1
kafka整合Flume
kafka整合Flume<blockquote前提是已经安装完成flume</blockquote1、添加启动flume时的配置文件<pre<codenode01执行以下命令开发flume的配置文件cd/kkb/install/apacheflume
如何保证kafka消费的顺序性
在Kafka中Partition(分区)是真正保存消息的地方,发送的消息都存放在这里。Partition(分区)又存在于Topic(主题)中,并且一个Topic(主题)可以指定多个Partition(分区)。在Kafka中,只保证Partition(分区)内有序,不保证Topic所有分区都是有序
Kafka 工作流程及文件存储机制
一、Kafka工作流程!image.png(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/f0d68ebb120cb01bb30b0be330641502.png)Kafka中用topic对消息进行分类,
Kafka 源码学习:动态配置
Kafka动态配置实现Kafka的动态配置基于Zookeeper实现,本文主要梳理了Kafka(version:2.8)中动态配置的实现逻辑。背景信息在Kafka中,Zookeeper客户端没有使用常见的客户端工具(如:Curator
kafka-- 过期文件的删除
同RocketMQ过期文件的删除(https://segmentfault.com/a/1190000041579108),kafka也会定期清理文件。在Broker启动的时候,就会启动一个定时任务,延迟30s,然后每5分钟就开始去判断释放要删除过期文件。!image.png
Kafka -- 消息发送存储流程
kafka的目录结构和RocketMQ消息发送存储流程(https://segmentfault.com/a/1190000041572710)是不一样的,但是某部分思想还是一致的。首先是kafkalogs下,放的是topicpartition的文件夹,比如topic为test的
KAFKA消息丢失
KAFKA默认配置,既可能丢失消息,也可能重复消费消息。默认配置以高吞吐量为目的。kafka在生产端、消费端、BROKER时都可能会丢失一些消息7.1生产者端配置消息丢失生产者在发送消息时,会有一个ack机制,当ack0或者ack1时,都可能会丢消息。Kafka默认ack1。说明如
kafka(下):快、主从同步
为什么这么快上篇(https://segmentfault.com/a/1190000041534185)文章提到了kafka的结构,其中有3点有助于提高它的吞吐量。partition并行处理多个partition承载一个topic的消息存储和传输,增加partit
kafka(上):基本结构和消息存储
与传统的mq(如rabbitmq)不同,kafka以文件形式存储和传输消息,官方将其定义为事件流式处理平台,它天然具备分布式属性。2.8版本前,kafka需要zk存储broker和consumer部分信息(注意:producer不依赖zk);2.8之后,kafka已经不再依赖kafka。
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。