HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
Hadoop中间结果lzop压缩
为了节省磁盘空间,文件的存储往往需要压缩,有的需要压缩比大,有的需要压缩速度快。而对于一套计算的结果存储,如多个MapReduce之间,需要能支持分片的压缩方式。lzop就是个可以支持分片的压缩方式,非常适合用于多个MapReduce之间的计算中间结果存储。一、在Hadoop上安装lzo
Zookeeper启动失败(CentOS 7 防火墙)
zookeeper配置:1.zoo.cfg的server.idhost:2888:38882.zoo.cfg的dataDir3.在dataDir中创建myid文件,写入当前节点的id正确配置下zookeeper启动失败,ssh免密登录也已配置,查看zookeeper.out<pr
你应该知道的 HBase 基础,都在这儿了
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/dfbb5e5ee7a2fa6638824f9360a63b46.png)<blockquote<strong阿里妹导读</strong:2006年10月Goo
从用户成为“股东” —— 在 Apache 基金会的 2600 天
3月27日,腾讯云大数据及人工智能产品研发的专家研究员堵俊平受邀成为Apache软件基金会Member(ApacheSoftewareFoundationMember,以下简称ASFMember),一封名为“邀请成为ASFMember”的电子邮件正式为堵俊平敲开了开源世界的新大
hadoop配置与wordcount
hadoop配置与wordcount参考的博客大多都是hadoop2.x和低版本的java之上的,配置过程写出来看似很简单,看别人的博客也感觉步骤都差不多,但是自己配置时候出了很多问题:datanode启动不了,网页不能正常显示,datanode莫名死掉,resourcemanager启
hive sql优化中的那些参数和使用方式
自动化MapJoin<pre<codesethive.auto.convert.jointrue;</code</pre自动化了MapJoin,之后我们就不需要在query中再写了。MapJoin用于小表Join大表的场景,在大表通过Mapper时,
大数据工程师的通关攻略
大数据时代下,大数据工程师如何应对?平台型大于业务行大数据工程师所需的核心技能大数据团队构成以及岗位职责简介Hadoop生态研发工程师(平台工程师)对Hadoop生态组件很了解,精度开源框架源码,对业务平台支撑,适合技术极客的人
hadoop-2.6.0-cdh5.7.0源码编译支持压缩
准备:解压hadoop2.6.0cdh5.7.0.tar.gz源码包,看到里面有个BUILDING.txt文件,里面列出了编译所需依赖组件。<blockquote<pRequirements:</p<ul<liUnixSystem</li<liJDK1.7
使用Python操作Hadoop,Python-MapReduce
环境环境使用:hadoop3.1,Python3.6,ubuntu18.04Hadoop是使用Java开发的,推荐使用Java操作HDFS。有时候也需要我们使用Python操作HDFS。本次我们来讨论如何使用Python操作HDFS,进行文件上传,下载,查看文件夹,以及如何
Hadoop集群搭建踩坑
在Hadoop集群安装配置完成后,需将namenode格式化,namenode格式化需先启动journalnode。<pre<code$hadoopdaemons.shstartjournalnode</code</pre出现报错:<pre<code:Nam
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。