hadoop2.7集群迁移namenode

我的hadoop集群是2.7.0的集群。

hadoop是机器不相关的,迁移namenode的话,可以按以下步骤迁移。

1、关闭所有hadoop集群、zookeeper、hive、hbase集群,设置hosts和ssh互信,调整服务器时间

2、拷贝hadoop的目录和相应的数据目录到新namenode主机,要保持新旧主机的目录一致。

3、修改$HADOOP_HOME/etc/hadoop/下的配置文件:

core-site.xml、hdfs-site.xml、mapred-site.xml、master、slaves、yarn-site.xml等文件中的namenode的主机名改为新主机的主机名

4、确保所有datanode节点,也已经修改了步骤3中的配置文件。

5、修改zookeeper中的配置文件zoo.cfg

6、修改hbase中的配置文件hbase-site.xml

7、修改hive的配置文件,如果zookeeper有修改的话。同时,hive还需要修改mysql的关于namenode配置信息的数据记录。执行以下sql:

update DBS set DB_LOCATION_URI=REPLACE(DB_LOCATION_URI,'old host','new host');
update SDS set LOCATION=REPLACE(LOCATION,'old host','new host');

启动hadoop、zookeeper、hbase、hive后,检查是否修改成功。


你可能感兴趣的:(hadoop2.7集群迁移namenode)