HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

YARN的介绍及实践探索

<blockquote本文来自OPPO互联网基础技术团队,转载请注名作者。同时欢迎关注我们的公众号:OPPO_tech,与你分享OPPO前沿互联网技术及活动。</blockquote什么是YARN?ApacheHadoopYARN:YetAnotherResourceNegot

Hadoop开发插件安装

Hadoop开发插件安装实验环境·操作机:Windows7实验工具·Web浏览器:常用的有谷歌浏览器,火狐浏览器等·Eclipse:Mars.1Release(4.5.1)实验内容在eclipse下安装hadoop的插件,同步对had

Hadoop伪分布式模式安装

Hadoop伪分布式模式安装实验环境·操作机:Windows7实验工具·Web浏览器:常用的有谷歌浏览器,火狐浏览器等·Xshell6:是一个强大的安全终端模拟软件,它支持SSH1,SSH2,以及MicrosoftWindows平台的TELNET

HDFS—>运维篇

一、增加节点操作系统配置:①主机名、网络、防火墙、ssh配置sshkeygentrsa同时可以把集群中任意一台节点的ssh的authkeys文件分发到最新的这个节点在所有节点的/etc/hosts文件中添加该节点的域名映射把namenode的相关配置文件

HDFS—>Namenode缓存篇

一、基本概念2.3添加了集中式缓存管理,由Datanode堆外内存组成,Namenode统一管理阻止频繁使用的数据从内存中删除由于是Namenode统一管理,因此在读可以根据情况调度,提高读性能客户端可以通过零拷贝技术直接读取缓存数据提高集群内存利用率,读某个

HBase—>基本概念篇

一、架构Hbase的是主从架构,通过zookeeper来保证高可用Hbase的存储机构是LSM数据—①—&gt;内存—②—&gt;小文件—③—&gt;大文件<pre<code①:Hbase采用了WAL预写日志,保证写内存的数据不丢失,载体是Hlog之后就把写的

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。