HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

hive on spark

简述hiveonspark就是使用hive记录元数据,以及解析sql。使用spark的rdd真正执行计算任务。hdfs负责存储spark负责执行hive负责数据管理版本apachehive3.1.3bin.tarspark3.3.1binhadoop3s

万亿数据秒级响应,Apache Doris 在360 数科实时数仓中的应用

作者:360数科中间件团队编辑整理:SelectDB作为以人工智能驱动的金融科技平台,360数科携手金融合作伙伴,为尚未享受到普惠金融服务的优质用户提供个性化的互联网消费金融产品,致力于成为连接用户与金融合作伙伴的科技平台。360数科旗下产品主要有360借条、360小微

hive常用函数分享

持续更新<pre<code1.NVL函数NVL(expr1,expr2):空值转换函数;如果expr1为NULL,返回值为expr2,否则返回expr1。适用于数字型、字符型和日期型,但是expr1和expr2的数据类型必须为同类型。</code</pre<pre

网易传媒基于 Arctic 的低成本准实时计算实践

网易传媒大数据实际业务中,存在着大量的准实时计算需求场景,业务方对于数据的实效性要求一般是分钟级;这种场景下,用传统的离线数仓方案不能满足用户在实效性方面的要求,而使用全链路的实时计算方案又会带来较高的资源占用。基于对开源数据湖方案的调研,我们注意到了网易数帆开源的基于ApacheIcebe

线上数据问题排查案例分享-因为 HMS 和底层 orc 文件中某字段的数据精度不一致造成的数据丢失问题

线上数据问题排查案例分享因为HMS和底层orc文件中某字段的数据精度不一致造成的数据丢失问题大家好,我是明哥,本篇文章跟大家分享一次线上数据问题的排查案例,并总结下背后的技术背景和最佳实践,希望对大家有所帮助。1.避坑指南和最佳实践先说下通过本案例总结的避坑

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。