Wesley13 Wesley13
2年前
java Api 读取HDFS文件内容
packagedao;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.;importjava.io.;publicclassHDFSApi{/
Wesley13 Wesley13
2年前
Hadoop使用学习笔记(1)
Hadoop使用学习笔记1.Hadoop安装与基本概念Hadoop发行版本地址(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fhadoop.apache.org%2Freleases.html)1.1环境配置需
Stella981 Stella981
2年前
Hive出现拒绝连接ConnectionRefused 解决
Causedby:java.net.ConnectException:CallFromnn1.hadoop/192.168.10.6tonn2.hadoop:9000failedonconnectionexception:java.net.ConnectException:拒绝连接;Formoredetailssee:
Stella981 Stella981
2年前
Hbase javaAPI(工具类)表的增删改查
建立连接:packageInit;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.hbase.;importorg.apache.hadoop.hbase.client.;importja
Stella981 Stella981
2年前
Hadoop是一种开源的适合大数据的分布式存储和处理的平台
“Hadoop能做什么?”,概括如下:  1)搜索引擎:这也正是DougCutting设计Hadoop的初衷,为了针对大规模的网页快速建立索引;  2)大数据存储:利用Hadoop的分布式存储能力,例如数据备份、数据仓库等;  3)大数据处理:利用Hadoop的分布式处理能力,例如数据挖掘、数据分析等;  4)
Stella981 Stella981
2年前
Hadoop之Shell脚本自动启动
在用Hadoop进行大数据分析处理时,通常配置的服务器不止一两台。为了减少人工操作的重复性,所以hadoop提供了可以自动启动Hadoop集群的Shell脚本。在使用Shell脚本启动集群之前,需要进行相应的配置。说明:$HADOOP\_HOME/root/project/hadoop(根据自己配置的路径不同而不同)打开$HADOOP\_H
Stella981 Stella981
2年前
Apache Hadoop 2.4.1 命令参考
概述所有的Hadoop命令都是通过bin/hadoop目录下的脚本所执行,在没有任何参数的情况下运行Hadoop脚本将打印该命令描述。Usage:Hadoop \configconfdir\\COMMAND\\GENERIC\_OPTIONS\\COMMAND\_OPTIONS\hadoop有个输入选项解析框
Stella981 Stella981
2年前
Python大数据分析(二):大数据技术基础
文章目录(一)Linux系统和大数据(二)Hadoop(1)Hadoop包含哪些模块?(2)Hadoop的生态成员(3)哪些人在使用Hadoop?(三)Spark(1)Scala(2)RDD(3)主件(四)云计算(1)虚拟化技术
Wesley13 Wesley13
2年前
Java_Habse_add
1importjava.io.IOException;2importorg.apache.hadoop.conf.Configuration;3importorg.apache.hadoop.hbase.HBaseConfiguration;4importorg.apache.hadoop
Stella981 Stella981
2年前
MapReduce例程
TemperatureMR.javapackage cn.kissoft.hadoop.week05;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.i