HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

一文带你了解数据仓库HIVE的安装过程

HIVE是一个数据仓库,该仓库基于hadoop框架,可以将存在hdfs上的结构化数据文件映射为一张数据库表。HIVE可以使用类SQL语句来处理结构化数据(查询数据),也即是把结构化数据当成一张类mysql中的表,采用SQL语句查询。<blockquote结构化数据即行数据,可以用二维表结构来

常见的Hadoop和Spark项目

  常见的Hadoop和Spark项目,如果有正在做项目的小伙伴可以了解一下,下面我们一块来看一下具体的内容。  有一句古老的格言是这样说的,如果你向某人提供你的全部支持和金融支持去做一些不同的和创新的事情,他们最终却会做别人正在做的事情。如比较火爆的Hadoop、Spark和Storm,每个人都认

如何学习Hadoop

  如何学习Hadoop,如何学习Hadoop,对大数据开发感兴趣的小伙伴就随着小编一起来了解一下吧。  Hadoop实现了一个分布式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(lowcost)硬件上;

Hadoop的shuffle过程

  Hadoop的shuffle过程,对大数据感兴趣想要学习或者是想要加入到大数据行业的小伙伴们就随小编一起来看一下吧。  Hadoop的shuffle过程就是从map端输出到reduce端输入之间的过程,这一段应该是Hadoop中最核心的部分,因为涉及到Hadoop中最珍贵的网络资源,所以shuf

SQL高阶(窗口函数)

窗口函数窗口函数也称为OLAP(OnlineAnalyticalProcessing)函数,意思是对数据库数据进行实时分析处理,窗口函数在Oracle和SQLServer中也被称为分析函数,窗口函数语法如下<pre<code&lt;窗口函数&gt;OVER(PART

一文带你了解HDFS的shell命令

1准备知识HDFS:hadoop集群分布式文件系统,用来存储海量数据。HDFS采用分而治之的设计思想,将文件切分为文件块进行存储,存储数据的节点为datanode,存储这些数据具体存放位置的节点为namenode。HDFS的架构为一主多从,即namenode为主,datanade为从。

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。