hadoop2.5集群迁移namenode

来源:互联网 发布:作品集网站 知乎 编辑:程序博客网 时间:2024/04/30 17:35

我的hadoop集群是2.5.0的集群。

 

hadoop是机器不相关的,迁移namenode的话,可以按以下步骤迁移。

 

1、关闭所有hadoop集群、zookeeper、hive、hbase集群,设置hosts和ssh互信,调整服务器时间

 

2、拷贝hadoop的目录和相应的数据目录到新namenode主机,要保持新旧主机的目录一致。

 

3、修改$HADOOP_HOME/etc/hadoop/下的配置文件:

 

core-site.xml、hdfs-site.xml、mapred-site.xml、master、slaves、yarn-site.xml等文件中的namenode的主机名改为新主机的主机名

 

4、确保所有datanode节点,也已经修改了步骤3中的配置文件。

 

5、修改zookeeper中的配置文件zoo.cfg

 

6、修改hbase中的配置文件hbase-site.xml

 

7、修改hive的配置文件,如果zookeeper有修改的话。同时,hive还需要修改mysql的关于namenode配置信息的数据记录。执行以下sql:

 

update DBS setDB_LOCATION_URI=REPLACE(DB_LOCATION_URI,'old host','new host');

update SDS setLOCATION=REPLACE(LOCATION,'old host','new host');

 

启动hadoop、zookeeper、hbase、hive后,检查是否修改成功。

 

0 0