HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
浅谈离线数据倾斜
作者:京东零售 荆明岚一、数据倾斜的基本概念1、什么是数据倾斜?用最通俗易懂的话来说,数据倾斜无非就是大量的相同key被partition分配到一个分区里,造成了&39;一个人累死,其他人闲死&39;的情况,这种情况是我们不能接受的,这也违背了并行计
Hive 和 Spark 分区策略剖析
<blockquote作者:vivo互联网搜索团队DengJie</blockquote随着技术的不断的发展,大数据领域对于海量数据的存储和处理的技术框架越来越多。在离线数据处理生态系统最具代表性的分布式处理引擎当属Hive和Spark,它们在分区策略方面有着一些相似之处,但也存在一
PowerBI使用HIVE ODBC链接报错
提示创建spark链接失败,重新安装了ClouderaODBCDriverforApacheHive驱动还是一样<pre<code详细信息:“ODBC:ERRORHY000ClouderaHardy(35)Errorfromserver:error
HIVE换表加分区字段的步骤
换表加分区字段的步骤0.统计总数,分区数,保存建表语句<pre<codeselectcount(1)asnumfromtable1showpartitionstable1showcreatetabletable1</code</pre1.复制原有结构,新
Hive查询性能优化
使用explainHive的EXPLAIN命令用于分析Hive查询的执行计划。通过EXPLAIN命令,可以查看Hive在执行查询时的各种优化和执行策略,以及每个任务的资源使用情况和执行顺序等信息。Explain详解(https://link.segmentfault.c
分享一个 hive on spark 模式下使用 HikariCP 数据库连接池造成的资源泄露问题
最近在针对某系统进行性能优化时,发现了一个hiveonspark模式下使用HikariCP数据库连接池造成的资源泄露问题,该问题具有普适性,故特地拿出来跟大家分享下。1问题描述在微服务中,我们普遍会使用各种数据库连接池技术以加快获取数据库连接并执行数据查询的速度,
数据测试实践:从一个bug开始的大数据引擎兼容性探索
作者:京东零售李晓洁<blockquote我们常常忘记,天才也取决于其所能掌握的数据,即使阿基米德也无法设计出爱迪生的发明。——ErnestDimnet</blockquote在大数据时代,精准而有效的数据对于每个致力于长期发展的组织来说都是重要资产之一,而数据测试更
hive etl 通过 ETL 导出 Hive 中的数据
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/7b32b100899bd81695a577a3dc3ff6fc.png)什么是Hive?Hive是在Hadoop分布式文件系统上运行的开源分布式数据仓库
Hive 在工作中的调优总结
总结了一下在以往工作中,对于<codeHiveSQL</code调优的一些实际应用,是日常积累的一些优化技巧,如有出入,欢迎在评论区留言探讨~一、EXPLAIN查看执行计划二、建表优化2.1分区分区表基本操作,partitioned
HiveSQL 工作实战总结
记录一些工作中有意思的统计指标,做过一些简化方便大家阅读,记录如有错误,欢迎在评论区提问讨论~问题类型连续问题两种思路第一种:日期减去一列数字得出日期相同,主要是通过<coderow_number</code窗口函数第二种:后一个日期减去前
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。