阿里云环境ambari调整/hadoop目录到/grid1/hadoop-grid0过程记录

 

阿里云环境ambari调整/hadoop目录到/grid1/hadoop-grid0过程记录


2019-06-26

创建ambari的hdfs时,在配置调整namenode和datanode的路径没有在意,导致将系统盘也作为存储目录了,这样就导致随着hdfs数据的增加,100GB的系统盘剩余空间仅剩20GB不到了,再这样下去,系统就不可用了!问题很严重!所以想将hdfs下的目录迁移到数据盘下,从而不影响系统的正常运行。


本次迁移/hadoop目录,涉及到的组件包括:

HDFS,YARN,MapReduce2,Zookeeper,Storm和Kafka


HDFS调整:






YARN:


MapReduce:


Zookeeper:


Storm:


Kafka:


都调整完后,restart,提示如下:

日志提示如下:

具体信息为:

2019-06-2515:38:26,595 - Retrying after 10 seconds. Reason: Execution of'/usr/hdp/current/hadoop-hdfs-namenode/bin/hdfs dfsadmin -fshdfs://testcluster1.appbdp.com:8020 -safemode get | grep 'Safe mode is OFF''returned 1.

遇到这个问题,别害怕,这只是过程中的提示,并不是发生了错误!


等待一会就提示成功了,看来该提示信息是正常现象!

生产环境数据量比测试环境要大很多,所以在迁移时,会一直提示这个信息,推测应该是时间的问题,多等待一会就可以完成hadoop目录的迁移了。

你可能感兴趣的:(阿里云环境ambari调整/hadoop目录到/grid1/hadoop-grid0过程记录)