Stella981 Stella981
2年前
CDH集群手动导入scm库
一、手动导入scm库背景:正常安装clouderascmserver时,安装scm库是通过脚本 /usr/share/cmf/schema/scm\_prepare\_database.sh来自动建库的。/usr/share/cmf/schema/scm_prepare_database.shmy
Stella981 Stella981
2年前
Flink整合Oozie Shell Action 提交任务带Kerberos认证
最近这段时间一直在忙新集群迁移,上了最新的cdh6.3.0于是Flink提交遇到了许多的问题,还好有clouderaLicense有了原厂的帮助和社区的伙伴,问题解决起来快了不少。集群具体情况是CDH6.3.0Flink1.8.1,整个数据平台全部组件都上了kerberos和ldap因为要过认证,所以任务提交方法我们选择统一Oozie提交任务
Stella981 Stella981
2年前
Kerberos常见错误
1.CDH安装Kerberos后,重启集群报错SocketReader1forport8022:readAndProcessfromclient192.168.50.83threwexceptionjavax.security.sasl.SaslException:GSSinitiatefailedCaus
Stella981 Stella981
2年前
CDH版本大数据集群下搭建的Hue详细启动步骤(图文详解)
关于安装请见CDH版本大数据集群下搭建Hue(hadoop2.6.0cdh5.5.4.gzhue3.9.0cdh5.5.4.tar.gz)(博主推荐)(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.cnblogs.com%2Fzlslch%2Fp%2F6
Wesley13 Wesley13
2年前
CDH6.2安装
一、准备工作:1、普通用户root权限准备(sudo,此处用aiot用户,sudoer)groupaddr testuseraddd/home/test/ms/bin/bashc"user"gtestp2019rtest另外特别注意:aiot及密码用户在clouderam
Stella981 Stella981
2年前
Hive在SQL标准权限模式下创建UDF失败的问题排查
环境:CDH5.16Hive1.1.0已开启KerberosHive授权使用SQLStandardsBasedAuthorization模式(以下简称SSBA模式)症状表现:在编译好UDF的jar包之后,上传到HDFS目录。hdfs dfsmkdi
Stella981 Stella981
2年前
Solr
1Solr部署1.1环境准备:系统环境:CentOSLinuxrelease7.2.1511(Core)软件环境:Hadoop环境已搭建,其中包括了java以及zookeeperJavaversion"1.7.0\_79"Zookeeper3.4.5cdh5.2.
Stella981 Stella981
2年前
Linux集群 NTP 时间同步
基于CentOS7规划比如有2台机器IP主机名说明192.168.103.51cdh51本地NTP服务端192.168.103.52cdh52本地NTP客户端安装NTP服务每台机器都安装ntpyumyinstallntpNTP服务端(cdh51)配置
Stella981 Stella981
2年前
CDH5.12.1添加spark2.2.0服务
最新的CDH安装包中spark版本为1.6,不过对于勇于尝鲜的同学,官方也提供了spark2的升级包,在CDH中spark1和spark2可以共存,但是由于scala版本的兼容性问题,建议只装一个版本。由于spark依赖于scala所以需要在每个节点安装scala,并配置好SCALA\_HOME并将$SCALA\_HOME/bin加入PATH中。Sca