HADOOP集群迁移
文章目录
1.从现有集群中挑两台机器作为新集群的机器。 2.采用DISTCP的方式将数据全量拷贝过去 3.将hadoop集群中的其他组件逐个迁移 1.HIVE迁移需要修改HIVE元数据中SDS/DBS中相应的HDFS的路径 2.其他组件修改相应的配置 3.修改HDFS上相应目录的权限,DISTCP实际执行的是mapreduce任务,写入新的集群的数据都是采用的启动任务的linux用户权限。 4.检查数据,检查各个组件是否正常工作。 完。
1.从现有集群中挑两台机器作为新集群的机器。 2.采用DISTCP的方式将数据全量拷贝过去 3.将hadoop集群中的其他组件逐个迁移 1.HIVE迁移需要修改HIVE元数据中SDS/DBS中相应的HDFS的路径 2.其他组件修改相应的配置 3.修改HDFS上相应目录的权限,DISTCP实际执行的是mapreduce任务,写入新的集群的数据都是采用的启动任务的linux用户权限。 4.检查数据,检查各个组件是否正常工作。 完。
评论
登录后参与技术讨论,分享你的经验与见解。
登录 / 注册暂无评论