HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
数据搬运组件:基于Sqoop管理数据导入和导出
一、Sqoop概述Sqoop是一款开源的大数据组件,主要用来在Hadoop(Hive、HBase等)与传统的数据库(mysql、postgresql、oracle等)间进行数据的传递。!image(https://imghelloworld.osscnbeijing.al
3-搭建Hadoop HA
3搭建HadoopHA<imgalt""title""/0.更改主机名 hostnamectlsethostnamemaster hostnamectlsethostnamemaster2 hostnamectlsethostnames
分布式存储单主、多主和无中心架构的特征与趋势
分布式对象存储和分布式文件系统具有很强烈的对比性分布式对象存储是key/value的存储模式,以restful访问方式为主,几乎处于扁平化的存储形式,通过地址作为主键,访问、更新的文件对象作为值。文件本身可以分布式分片,但是key/value的访问都是原子性,文件不能追加数据,亦不能随机
Hadoop 3.2.1‖联邦模式下突破router的性能瓶颈的实践
上两集回顾:在第一集(https://segmentfault.com/a/1190000039241425)(点击可参阅详情)中,我们通过性能故障排查解决了Hadoop2.6.0版本的瓶颈问题;在第二集(https://segmentfault.com/a/119000003927
hdfs命令的那点事
背景时间:2021年02月26日13:58:26简要步骤:确定命令是什么?确定命令的位置是是哪里?确定命令执行的主类是哪一个?按照执行流程查看例子:发现hdfsdfsadminreport存储指标和hdfsdfsduh/结果不一致,需要查
hive建模分析
建模分析基于访客系统的案例来进行讨论建模分析目的分析出整个数仓需要哪些层次,哪些表,哪些字段ODS层:源数据层对接源数据,保持和源数据相同粒度DWD任务:1.清洗。不完整数据
面试系列一:精选大数据面试真题10道(混合型)-附答案详细解析
<blockquote公众号(五分钟学大数据)将推出大数据面试系列文章—<strong五分钟小面试</strong,此系列文章将会<strong深入研究各大厂笔面试真题</strong,并根据笔面试题<strong扩展相关的知识点</strong,助力大家都能够成功入职大厂!</blo
数据库‖超万亿规模的Hadoop NameNode性能故障排查过程分享
随着国内互联网行业的发展,万亿规模的超大集群虽然已不像几年前那么凤毛麟角,但是也并不多见,尤其是涉及超万亿规模的超大集群性能故障排查的机会就更加稀少。而这次我所进行的超万亿规模的HadoopNameNode性能故障排查也是在我创业几年以来所遇到的集群规模最大,耗时最长,排查工作量最大,头发
hdfs高容错实现
hdfs高容错机制(https://link.segmentfault.com/?encZtJGwWKHoQ4ZkMpbvEh%2BEA%3D%3D.%2BVTX5I6yfJJ68USJN1a2EsBo7nLnMMqsurK5Ubqis9lHDQysdGrHbiDLmdkc0mo1WPJWux
【史上最全】Hadoop 核心 - HDFS 分布式文件系统详解(上万字建议收藏)
1.HDFS概述Hadoop分布式系统框架中,首要的基础功能就是文件系统,在Hadoop中使用FileSystem这个抽象类来表示我们的文件系统,这个抽象类下面有很多子实现类,究竟使用哪一种,需要看我们具体的实现类,在我们实际工作中,用到的最多的就是HDFS(分布式文件系统)
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。