HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Hadoop2.4编译 伪分布安装 集群安装笔记

安装hadoop的时候每次重新安装都有些配置会记不太清楚,要去查询很麻烦这次做了个笔记,在这里和大家分享下,如果内容有错误,请指正。因为是从word中复制出来的截的图片都没了,可以从下面链接中下载到word原版!之前没有写博客的习惯,以后会陆续分享一些之前的笔记!!微笑(http://static.oschina.net/uploads/img/2015

Hadoop Streaming 实战: 文件分发与打包

如果程序运行所需要的可执行文件、脚本或者配置文件在Hadoop集群的计算节点上不存在,则首先需要将这些文件分发到集群上才能成功进行计算。Hadoop提供了自动分发文件和压缩包的机制,只需要在启动Streaming作业时配置相应的参数。1\.–file将本地文件分发到计算结点2\.–cacheFile文件已经存放在HDFS中,希望计算时

HDFS安装

最近内部需求,要求我把数据上传HDFS,顺便分享一下如何安装并查看HDFS文件目录我是在ubuntu(14.04.2)上安装的:1.我安装ubuntu用的不是Hadoop用户,所以要新建一个Hadoop用户  $ sudouseradd\mhadoops/bin/bash设置密码$sudo

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。