HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

大数据埋点怎么做?如何验证和管理?

12月23日,业内首档程序员综艺“猿桌派”正式开播,首发嘉宾去哪儿网iOS高级研发武蕴、知乎大数据中心张彦瑞与主持人融云场景化研发负责人臧其龙就“客户端埋点与大数据分析”展开讨论,为大家详细拆解埋点的作用、意义,给个人和公司带来的价值以及如何验证,并就此揭开“程序员如何保持职业长青”这个经

ORC、Parquet等列式存储的优点

ORC和Parquet都是高性能的存储方式,这两种存储格式总会带来存储和性能上的提升。1.Parquet(1)Parquet支持嵌套的数据模型,类似于ProtocolBuffers,每一个数据模型的schema包含多个字段,每一个字段有三个属性:重复次数、数据类型和字段名,重复次数可以是以

最强最全面的大数据SQL面试系列

本套SQL题的答案是由许多小伙伴共同贡献的,11的力量是远远大于2的,有不少题目都采用了非常巧妙的解法,也有不少题目有多种解法。本套大数据SQL题不仅题目丰富多样,答案更是精彩绝伦!<blockquote注:以下参考答案都经过简单数据场景进行测试通过,但并未测试其他复杂情况

大数据开发之Hive SQL内置函数

前言Hive内部提供了很多函数给开发者使用,包括数学函数,集合函数,大数据培训类型转换函数,日期函数,条件函数,字符函数,聚合函数,表生成函数等等,这些函数都统称为内置函数。!(https://imghelloworld.osscnbeijing.aliyuncs.com

DataPipeline正式加入中国信通院数据库应用创新实验室!

近日,DataPipeline获中国信息通信研究院(以下简称“中国信通院”)批准,正式加入由其发起成立的数据库应用创新实验室,成为共建单位。这是中国信通院对DataPipeline在数据库产业取得工作成果的充分认可。未来,DataPipeline将积极参与实验室相关工作,助力数据库产业生态健康发展与

数据管理典范!「山东城商行联盟数据库准实时数据采集系统」入选2021中国大数据应用样板案例

12月17日,由中国信息协会大数据分会主办的“2021中国大数据技术应用大会”在北京圆满落幕。来自中国信息协会、中国工程院、国家信息中心、中国软件评测中心、中国金融认证中心等的权威专家、知名企业代表出席本次大会,对大数据的需求、应用和产业发展进行了深度探讨。大会重磅发布“2021中国大数据应用样板1

数据标注加速落地深耕 为AI高质量发展提供新动能

人工智能(AI)是一个相对简单的概念,却有着非同寻常的含义。这个词是由美国计算机科学家约翰·麦卡锡在1956年创造的,他被公认为人工智能之父。相对于人类和其他动物所表现出的“自然”智能,它被用来描述机器所表现出的一种智能形式。随着人工智能深度学习算法的突破及海量数据的支撑,人工智能已在自动驾驶、

OPPO大数据计算集群资源调度架构演进

1背景随着公司这两年业务的迅速扩增,业务数据量和数据处理需求也是呈几何式增长,这对底层的存储和计算等基础设施建设提出了较高的要求。本文围绕计算集群资源使用和资源调度展开,将带大家了解集群资源调度的整体过程、面临的问题,以及我们在底层所做的一系列开发优化工作。2资源调度框架

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。