HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
Apache Trafodion技术架构介绍
Trafodion简介Trafodion是一个构建在Hadoop/HBase基础之上的关系型数据库,它完全开源免费。Trafodion能够完整地支持ANSISQL,并且提供ACID事务保证。和传统关系数据库不同的地方在于,Trafodion利用底层Hadoop的横向扩展能力,可以提供极
hadoop集群搭建-hadoop3.1.1
hadoop集群搭建环境centos6.7虚拟机三台yh01(主节点)yh02yh03一下如无特殊说明都是在主节点上配置1.下载http://mirrors.hust.edu.cn/ap...(https://link.segmentfaul
Hadoop系列(四)MapReduce 传递自定义bean并对结果排序、对mapper和reducer并发数的分析
案例要求:实现对手机号的上行和下行流量统计并分组测试数据如下图所示:!clipboard.png(/img/bVbfWQQ?w1858&h662)分析:通常情况下,mapper和reducer的输入输出类型可以为LongWritable,Text等,如果我们要传递自定义的be
Hadoop系列(三)MapReduce Job的几种提交运行模式
Job执行可以分为本地执行或者集群执行。hadoop集群安装部署在远程centos系统中。使用经典的WordCount代码为例。1.本地执行模式(本地为MacOS环境),无需启动远程的hadoop集群,本地job会提交给本地执行器LocalJobRunner去执行。1)输入输出数据
大数据项目实践(一)——之HDFS集群配置
一、服务节点规划设计<table<thead<tr<th</th<th机器1</th<th机器2</th<th机器3</th<th机器4</th<th机器5</th</tr</thead<tbody<tr<tdhdfs</td<tdNa
Hadoop中的通用分布式计算框架
_本文的内容是对本人近期学习hadoop系统过程的总结和思考,接触的通用计算框架有限,错误在所难免,欢迎指正和讨论_我接触的hadoop中的通用计算框架主要是mapreduce和spark。其中mapreduce在hadoop2.0中被简化,将资源管理的功能抽象、独立出来,形成了yarn,一个
追寻终极数据库 - 事务/分析混合处理系统的交付挑战 (1)
追寻终极数据库摇晃的数据库钟摆IT行业的技术决策就像一只来回摇晃的钟摆。大约十年前,新型网络公司开始收集比以往任何时候都更多的数据,他们迫切需要将数据库系统的扩展性能和处理性能提升到一个新的水平,当时已经出现了能在大规模并行处理(MPP)构架上扩展的关系型数
HBase版本进化史
HBase诞生于美国加州旧金山的Powerset公司,从起初作为Hadoop项目的一部分,到后来成为apache软件基金会的顶级项目,再到逐渐被越来越多的互联网公司在很多业务场景中,重点使用。2006年至今,HBase经历了10多年的演化迭代:2006年12月,Google发布了论文《Bi
Spark整合Elasticsearch-从ES读取数据
Spark整合Elasticsearch从ES读取数据由于ES集群在拉取数据时可以提供过滤功能,因此在采用ES集群作为spark运算时的数据来源时,根据过滤条件在拉取的源头就可以过滤了(ES提供过滤),就不必像从hdfs那样必须全部加载进spark的内存根据filter算子过滤,费时费
大数据集群搭建 - 2. CDH集群安装 - NTP,MYSQL,nginx安装
五、安装ntpd时间服务器<pre<code按照Cloudera的官方建议,所有的CDH节点和CloudeaManager节点都需要启动ntpd服务。要不然会报如下错误:1.此角色的主机的运行状况为不良。以下运行状况测试不良:时钟偏差.2.Thehost&39
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。