HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
浅谈HDFS(二)之NameNode与SecondaryNameNode
NN与2NN工作机制<blockquote思考:NameNode中的元数据是存储在哪里的?</blockquote假设存储在NameNode节点的硬盘中,因为经常需要随机访问和响应客户请求,必然效率太低,所以是存储在内存中的但是,如果存储在内存中,一旦断电,元数据丢
kafka源码解析4:RecordAccumulator的相关组件BufferPool,CopyOnWriteMap(下)
CopyOnWriteMap<pre<codeprivatefinalConcurrentMap<TopicPartition,Deque<ProducerBatch>>batches;</code</pre前面解析RecordAc
kafka源码解析4:RecordAccumulator的相关组件BufferPool,CopyOnWriteMap(上)
概述上节解析了生产者发送消息时RecordAccumulator的相关操作,本节解析下RecordAccumulator用到的其他组件BufferPool,CopyOnWriteMapBufferPool缓冲池上节讲到RecordAccumulator在append的时
浅谈HDFS(一)
产生背景及定义<blockquoteHDFS:分布式文件系统,用于存储文件,主要特点在于其分布式,即有很多服务器联合起来实现其功能,集群中的服务器各有各的角色</blockquote随着数据量越来越大,一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理的磁盘中,
Hadoop之完全分布式集群
<blockquote<p集群环境:</p<ol<licentOs6.8:hadoop102,hadoop103,hadoop104</li<lijdk版本:jdk1.8.0_144</li<lihadoop版本:Hadoop2.7.2</li</ol</blo
kafka源码解析目录
客户端Producer源码解析kafka源码解析1:Cluster集群信息(https://segmentfault.com/a/1190000020242297)kafka源码解析2:Metadata集群元信息(https://segmentfault.com/a/119000
kafka源码解析3:RecordAccumulator消息存储
概述前面两节分析了部分源码,中间间隔了一个月没有继续分享,原因是在深入阅读中碰到了一些问题,因为我阅读源码是以KafkaProducer发送消息(send方法)作为入口开始逐行分析,涉及到新的类后就把整个类和相关的类全部解析一遍,但是引入的其他类在send方法里只用到了部分方法,导致我在
Hadoop 系列(八)—— 基于 ZooKeeper 搭建 Hadoop 高可用集群
一、高可用简介Hadoop高可用(HighAvailability)分为HDFS高可用和YARN高可用,两者的实现基本类似,但HDFSNameNode对数据存储及其一致性的要求比YARNResourceManger高得多,所以它的实现也更加复杂,故下面先进行讲
Hadoop 系列(七)—— HDFS Java API
一、简介想要使用HDFSAPI,需要导入依赖<codehadoopclient</code。如果是CDH版本的Hadoop,还需要额外指明其仓库地址:<pre<code<?xmlversion&34;1.0&34;encoding&34;
Hadoop 系列(六)—— HDFS 常用 Shell 命令
一、基本命令打开HbaseShell:<pre<codehbaseshell</code</pre1.1获取帮助<pre<code获取帮助help获取命令的详细信息help&39;status&39;</code
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。