HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
分享一个 HIVE SQL 性能优化点-使用公共表表达式 CTE 替换临时表
分享一个HIVESQL性能优化点使用公共表表达式CTE替换临时表hive作业的性能优化是一个永恒的话题,其优化方法也有很多,在此分享一个优化点,即编写SQL时使用公共表表达式CTE替换临时表,经测试优化效果还不错,尤其是涉及到当量IO的场景。1.CTE
利用好谓词下推提升Hive性能
谓词下推(PredicatePushdown,简称PPD),是指尽量将SQL查询中的谓词(where条件)提前执行,减少后续操作的数量和计算量。在Hive中默认是开启的,也可以通过配置<codeSEThive.optimize.ppdtrue;</code显式开启。例如,对于如下SQL
更改 HIVE 表字段数据类型有哪些注意事项?
更改HIVE表字段数据类型有哪些注意事项?1.使用HIVE表的常见规范在大数据离线分析场景中,在数据建模/表格式这一层,目前使用最多的还是APACHEHIVE这一数据仓库框架(湖仓一体的框架,如Iceberg/DeltaLake/Hudi也在加速落地)。
hive on spark
简述hiveonspark就是使用hive记录元数据,以及解析sql。使用spark的rdd真正执行计算任务。hdfs负责存储spark负责执行hive负责数据管理版本apachehive3.1.3bin.tarspark3.3.1binhadoop3s
万亿数据秒级响应,Apache Doris 在360 数科实时数仓中的应用
作者:360数科中间件团队编辑整理:SelectDB作为以人工智能驱动的金融科技平台,360数科携手金融合作伙伴,为尚未享受到普惠金融服务的优质用户提供个性化的互联网消费金融产品,致力于成为连接用户与金融合作伙伴的科技平台。360数科旗下产品主要有360借条、360小微
hive常用函数分享
持续更新<pre<code1.NVL函数NVL(expr1,expr2):空值转换函数;如果expr1为NULL,返回值为expr2,否则返回expr1。适用于数字型、字符型和日期型,但是expr1和expr2的数据类型必须为同类型。</code</pre<pre
网易传媒基于 Arctic 的低成本准实时计算实践
网易传媒大数据实际业务中,存在着大量的准实时计算需求场景,业务方对于数据的实效性要求一般是分钟级;这种场景下,用传统的离线数仓方案不能满足用户在实效性方面的要求,而使用全链路的实时计算方案又会带来较高的资源占用。基于对开源数据湖方案的调研,我们注意到了网易数帆开源的基于ApacheIcebe
线上 hive on spark 作业执行超时问题排查案例分享
线上hiveonspark作业执行超时问题排查案例分享大家好,在此分享一个某业务系统的线上hiveonspark作业在高并发下频现作业失败问题的原因分析和解决方法,希望对大家有所帮助。1问题现象某业务系统中,HIVESQL以hiveonspa
如何更改 datax 以支持hive 的 DECIMAL 数据类型?
如何更改datax以支持hive的DECIMAL数据类型?1.JAVA数据类型float/double与BigDecimal大家知道,JAVA中可以用来存储小数的数字类型,主要包括:基本数据类型float/double;基本数据类型
线上数据问题排查案例分享-因为 HMS 和底层 orc 文件中某字段的数据精度不一致造成的数据丢失问题
线上数据问题排查案例分享因为HMS和底层orc文件中某字段的数据精度不一致造成的数据丢失问题大家好,我是明哥,本篇文章跟大家分享一次线上数据问题的排查案例,并总结下背后的技术背景和最佳实践,希望对大家有所帮助。1.避坑指南和最佳实践先说下通过本案例总结的避坑
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。