HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

hive(06)、数据仓库Hive用户图形接口HWI的配置

       在之前的文中我们配置了一个hive监控的web界面的服务,主要用于查看当前HiveServer2服务链接的会话、服务日志、配置参数等信息,这个服务更像是一个hive提供的监控服务,本文我们将配置HWI(HiveWebInterface)hive用户图形接口,这是hive三种用户接口中的其中之一,可以在web界面上对hive服务进行操作

hive(02)、数据仓库Hive的基本使用

       在上篇《hive(01)、基于hadoop集群的数据仓库Hive搭建实践(https://my.oschina.net/zss1993/blog/1602402)》一文中我们搭建了分布式的数据仓库Hive服务,本文主要是在上文的基础上结合Hadoop分布式文件系统,将结构化的数据文件映射为一张数据库表,将sql语句转换为MapRedu

hive web interface

hwi(hivewebinterface)是hive命令行接口的一个补充,主要功能包括:1.shemabrowsing:获取table的信息,包括serde、columenname、columntype2.detachedqueryexecution:在hive命令行界面,用户如果需要执行多个查询,则需要同时打开多个命令行界面。h

大数据开发之Hive SQL优化思路分享

Hive的优化主要分为:配置优化、SQL语句优化、任务优化等方案。其中在开发过程中主要涉及到的可能是SQL优化这块。优化的核心思想是:•减少数据量(例如分区、列剪裁)•避免数据倾斜(例如加参数、Key打散)•避免全表扫描(例如on添加加上分区等)•减少job数(例如相同的on条件的join放

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。