HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
Hadoop之MapReduce(二)工作流和InputFormat介绍
1.完整的MapReduce程序一个完整的MapReduce程序在分布式运行中包含两类实例进程:1)MrAppMaster:负责整个程序运行过程的调度及状态协调2)YarnChild:负责Map阶段的整个数据处理流程3)YarnChild:负责Reduce阶段的整个数据处理流程。Map
Hadoop之MapReduce(一)初识
1.MapReduce介绍MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架。MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。MapReduce的作用
Hadoop之HDFS(三)HDFS API操作示例和读写流程
1.HDFSAPI示例1.1ClientAPI1)准备工作本人习惯使用Ubuntu,ide工具则是idea,如果是windows系统或者eclipse自行百度吧,我没有试过。老套路,创建Maven工程,导入依赖<pre<code<depe
Hadoop之HDFS(二)HDFS工作机制和集群安全模式
1NameNode和DataNode之间的心跳机制1)NameNode启动时,会启动一个IPCserver服务,2)DataNode启动后会主动连接NameNode的IPserver服务,默认每隔3秒连接一次,也就是心跳。这个时间可以通过dfs.heartbeat.interva
Hadoop之HDFS(一)概述与常用Shell操作
1.HDFS概述1.1HDFS简介HDFS(HadoopDistributedFileSystem),Hadoop分布式文件系统,用来解决海量数据的存储问题。1.2HDFS的特点优势高容错性:HDFS多副本分布式存
Hadoop入门与进阶
1.Hadoop入门之部署篇(https://segmentfault.com/a/1190000038707748)2.Hadoop之HDFS(一)概述与常用Shell操作(https://segmentfault.com/a/1190000038712672)
Hadoop入门之部署篇
Hadoop概述与部署参考:http://hadoop.apache.org/docs...(https://link.segmentfault.com/?enc%2FBY6OLwBGln%2FqygWeHD8Og%3D%3D.LHSxswVHzJc15xkFL0N5jtpLC1
hadoop教程-MapReduce
什么是MapReduceMapReduce是hadoop进行多节点计算时采用的计算模型,说白了就是hadoop拆分任务的一套方法论,刚接触MapReduce这个概念时,一时很难理解,也查了很多资料,因为每个人理解不一样,反而看的越多越糊涂,其实本质是很简单的东西,这里举一个例子帮助理解,
hadoop教程-hdfs客户端开发
hadoop环境hadoop版本为<pre<codehadoopversionHadoop2.10.1Subversionhttps://github.com/apache/hadoopr1827467c9a56f133025f28557bfc2c562d78e
hadoop节点地址localhost问题
问题描述hadoop集群安装完毕,在yarn的控制台显示节点id和节点地址都是localhost<pre<codehadoop@mastersbin$yarnnodelist20/12/1712:21:19INFOclient.RMProxy:Connec
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。