HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Hive常用函数整理

<blockquote记录hive三类函数:取整函数、随机抽样(rand()函数)、数组包含函数(array_contains)、laterviewexplode函数</blockquote取整函数round(A,B):四舍五入,A是整型或者浮点型参数,B是要

Hive On Tez自定义Job Name

今天在使用HiveOnTez的时候发现一个问题,那就是我们无法设置Tez运行在Yarn上面的JobName。按照设置MR正常的步骤来设置JobName发现也是无效的。这让我很迷惑,于是想了一下是不是因为TezSession的时候已经写死了导致的,然通过将Hive的源码下载下来(我用的是H

数据湖揭秘—Delta Lake

简介:DeltaLake是DataBricks公司开源的、用于构建湖仓架构的存储框架。能够支持Spark,Flink,Hive,PrestoDB,Trino等查询/计算引擎。作为一个开放格式的存储层,它在提供了批流一体的同时,为湖仓架构提供可靠的,安全的,高性能的保证。De

大数据培训Hive架构思想与设计原理

HiveMapReduce虽然只有map和reduce这两个函数,但几乎可以满足任何大数据分析和机器学习的场景。不过,复杂的计算可能需要使用多个job才能完成,这些job之间还需要根据其先后依赖关系进行作业的编排,开发比较复杂。在Hadoop出现之前,大部分的数

Kafka 的存储机制以及可靠性

在大规模数据量的数据分析及建模任务中,往往针对全量数据进行挖掘分析时会十分耗时和占用集群资源,因此一般情况下只需要抽取一小部分数据进行分析及建模操作。Hive全套视频学习资料:http://www.atguigu.com/download.shtml(https://link.segment

大数据培训Hive面试核心知识点分享

以下文章来源于大数据羊说1请谈一下Hive的特点hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。