HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
HADOOP性能优化和运维
集群中任意一个节点都可以被用来提交认任务,虽然通常我们使用master节点提交任务。HADOOP客户端不参与计算和存储,专门用来上传下载文件和提交任务。性能优化4大块:!(https://static.oschina.net/uploads/space/2017/0406/111251_QSBe_192561.png)具体优化如下:1.选
002_如何安装JDK以及Hadoop集群环境搭建_2台机都要配置一致
1.linux的jdk1.6安装和环境变量配置安装jdk1.6cd/usr/local/./jdk6u45linuxx64.bin配置环境变量并激活root@masterlocalvim/etc/profile.d/jdk.shexportJAVA_HOME
(二)大数据生态圈集群搭建之
搭建流程说明下载安装包高可用完全分布式搭建一.集群规划二.hadoop安装配置三.zookeeper安装配置四.集群格式化五.启动,操作,关闭集群六.访问NameNode的WebUI页面七.搭建Hadoop的client说明
Superior Scheduler:带你了解FusionInsight MRS的超级调度器
<blockquote<strong摘要:</strongSuperiorScheduler是一个专门为HadoopYARN分布式资源管理系统设计的调度引擎,是针对企业客户融合资源池,多租户的业务诉求而设计的高性能企业级调度器。</blockquote本文分享自华为云社区《Fusi
万字长文|Hadoop入门笔记(附资料)
大数据迅速发展,但是Hadoop的基础地位一直没有改变。理解并掌握Hadoop相关知识对于之后的相关组件学习有着地基的作用。本文整理了Hadoop基础理论知识与常用组件介绍,虽然有一些组件已经不太常用。但是理解第一批组件的相关知识对于以后的学习很有帮助,未来的很多组件也借鉴了之前的设计理念。文章
教你用Python 编写 Hadoop MapReduce 程序
<blockquote<strong摘要:</strongHadoopStreaming使用MapReduce框架,该框架可用于编写应用程序来处理海量数据。</blockquote本文分享自华为云社区《HadoopStreaming:用Python编写HadoopMa
MapReduce 示例:减少 Hadoop MapReduce 中的侧连接
<blockquote<strong摘要:</strong在排序和reducer阶段,reduce侧连接过程会产生巨大的网络I/O流量,在这个阶段,相同键的值被聚集在一起。</blockquote本文分享自华为云社区《MapReduce示例:减少HadoopMapReduc
Hive基本操作之用户访问次数统计
前言根据对用户ID、访问日期、访问次数的若干条数据,分析得出每个用户的累计访问次数,涉及字符串替换、时间函数、开窗、求和等技术。1.假如有用户访问数据(用户ID,访问日期,访问次数)<table<thead<tr<thuserId</th<thvisi
Apache Hudi 在 B 站构建实时数据湖的实践
简介:B站选择FlinkHudi的数据湖技术方案,以及针对其做出的优化。本文作者喻兆靖,介绍了为什么B站选择FlinkHudi的数据湖技术方案,以及针对其做出的优化。主要内容为:传统离线数仓痛点数据湖技术方案Hudi任务稳定性保障数据入湖实践增量数据湖平台收益社区贡
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。