HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
IDEA 运行 WordCount 程序
1.写在前面目标使用IDEA向虚拟机中的Hadoop伪分布式集群提交任务,运行MapReduce官方示例WordCountV1.0。环境说明Windows10IDEA2020.2.2Ce
Hive的JDBC连接
相关知识Hive是大数据技术簇中进行数据仓库应用的基础组件,是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以Hiveclient进行处理。若需要开发应用程序,则需要使用Hive的JDBC驱动进行连接。HiveJDBC驱动连接分为两种,早期的是HiveServer,最
Hadoop伪分布模式的安装
相关知识Hadoop由Apache基金会开发的分布式系统基础架构,是利用集群对大量数据进行分布式处理和存储的软件框架。用户可以轻松地在Hadoop集群上开发和运行处理海量数据的应用程序。Hadoop有高可靠,高扩展,高效性,高容错等优点。Hadoop框架最核心的设计就是HDFS和Map
个推技术:ETL工程师必看!超实用的任务优化与断点执行方案
前言随着大数据时代的快速发展,企业每天需要存储、计算、分析数以万亿的数据,同时还要确保分析的数据具备及时性、准确性和完整性。面对如此庞大的数据体系,ETL工程师(数据分析师)如何能高效、准确地进行计算并供业务方使用,就成了一个难题。作为一家数据智能公司,个推在大数据计算领域沉淀了丰富
Hive的安装部署操作
基本原理Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapRe
如何提升Hadoop访问对象存储US3的效率?我们做了这些技术实践
在信息爆炸的大数据时代,如何以更低成本来解决海量数据的存储问题,已成为企业大数据业务中的重要一环。UCloud自研的新一代对象存储服务US3,在过去一段时间,针对大数据业务场景推出了计算存储分离和大数据备份解决方案。这背后的主要原因包括:1、由于网络技术的高速发展,使得网络传输性能不
Hadoop - 集群安装(高可用)
Hadoop集群安装(https://segmentfault.com/a/1190000039987453)已经介绍了如何安装一个Hadoop集群,但是这个集群的NameNode出现故障,那这个集群是不可以用的。我们需要借助zookeeper来安装一个高可用集群,当于Active状态的N
Hadoop - 集群安装
环境准备我这里准备四个虚拟机,ip分别为:<pre<codebigdata01192.168.11.100bigdata02192.168.11.101bigdata03192.168.11.102bigdata04192.168.11.103</
云计算与Hadoop期末考试知识点复习
七、八、九、十、十二、十三放到一起理解。一、大数据的概念和特点、分类又称巨量数据,是指数据量达到无法用人脑,甚至现有工具获取,处理,并整理成为帮助企业经营决策更积极目的的资讯。特点:数据量大,类型多,时效性,速度快,真实性。分类:传统企业数据,机器和传感器数据,社交数据。二、云计算的概念,特点云计算是基于互联网的计算机方式,通过这计算方式,可以把共享的

【赵渝强老师】Kafka的消息持久化
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/fd99107e260d9e00483cd97be3bc0a73.png)1、Kafka消息持久性概述Kakfa依赖文件系统来存储和缓存消息。对于硬盘的传统观念是
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。