HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
千亿级的数据难题,优酷工程师怎么解决?
!(/img/bVbuTwM?w900&h600)阿里妹导读:优酷一天的日志量会达到千亿级别,面对如此大的数据样本,2017年5月,优酷完成了从Hadoop迁移到阿里云MaxCompute,实现计算消耗和储存的消耗呈下降趋势,得到了非常大的收益。今天,阿里数据技术专家门德
hadoop大数据架构
概要大数据是目前非常火热的词,基本各行各业都离不开大数据,利用金融数据分析一个公司的走势,利用监控数据可以抓住一个在逃逃犯。这些都是大数据应用程序。!在这里插入图片描述(/img/remote/1460000019689399?w655&h360)大数据技术的
大数据学习路线
一、大数据处理流程!大数据处理简化流程(/img/remote/1460000019667336?w740&h417)上图是一个简化的大数据处理流程图,大数据处理的主要流程包括数据收集、数据存储、数据处理、数据应用等主要环节。下面我们逐一对各个环节所需要的技术栈进行讲解:
大数据时代之大数据概念
大数据:指无法在一定时间范围内用常规软件工具进行捕捉,管理和处理的数据集合,是需要新模式才能具有更强大的决策力,洞察发现力和流程优化能力的海量,高增长率和多样化的信息资产最小的基本单位是bit,按顺序给出所有单位:bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。
java客户端无法上传文件到hdfs
<pre<code019070116:45:24,933INFOorg.apache.hadoop.ipc.Server:IPCServerhandler2on8020,callorg.apache.hadoop.hdfs.protocol.ClientProtocol
zookeeper的安装和使用
文章作者:foochane(https://link.segmentfault.com/?encf06LfbbsAn24rtvpwyqAkA%3D%3D.fViAiPG9TnbdqRpHTyVJ2IC%2FnjKP8g4N3zsiI5V3d2c%3D) 原文链接:https://fooc
Hive常用函数的使用
文章作者:foochane(https://link.segmentfault.com/?encYwXXb%2Bm0SWkdzJY37iI4EQ%3D%3D.%2BUywwCHrE6s%2FswamAnsNX4%2FVTR0gDWKbi9c4zOK808o%3D) 原文链接:https://
Hadoop集群下jps查看不到datanode信息的解决办法
在每次hdfsnamenodeformat之后,namenode的clusterid都会被自动更新,一般这种情况先去看datanode的logs日志,确定是clusterid不一致的问题了,这时候应该去到hdfs的tmp/dfs/current文件下,把datanode的clusteri
新手入门大数据 Hadoop基础与电商行为日志分析(三)
HDFS:1.分布式2.commdityhardware通用硬件上面3.高容错4.highthroughput高吞吐5.largedataset普通文件系统VS分布式的文件系统单机横跨N个机器前提和设计目标:hardwarefailure硬件错误崩溃后的快速恢复Streamin
新手入门大数据 Hadoop基础与电商行为日志分析(一)
chuanshang一个案例:美国一女高中生收到婴儿产品的推荐,被他的父亲向商场投诉,结果最终,意识到女儿真的怀了孕。大数据的4V特征:数据量volume速度velocity基于高度分析的价值value(数据量与有用的数据价值可能是成反比的)多样性variety大数据带来的技术变革
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。