Hadoop 1.x/2.x DataNode 下架 详解

Hadoop 1.x/2.x  DataNode 下架 详解

 

Hadoop 1.x/2.x DataNode 下架操作没有区别

一、修改 hdfs-site.xml

在 hdfs-site.xml 配置文件中增加以下内容(NameNode 节点的配置文件)

 


  dfs.hosts.exclude
  <value>$HADOOP_HOME/etc/hadoop/excludevalue>
 # 本地文件系统创建一个文件(命名随意)(exclude),Value的值就是该文件的路径

二、在 exclude 文件中 添加下架节点主机名

例如:需要下架的 DataNode节点的主机名分别为:slave5、slave6

则在 exclude 文件中添加需要下架的节点主机名,一个主机名一行。

 

slave5 slave6

三、重新载入 NameNode 配置,启动下架过程

下架的过程可能需要相当一段时间,因为他需要确保数据块的复制操作没有影响集群的其他任务。

hadooop dfsadmin -refreshNodes

四、监控命令

使用一下命令来监控下架进度,不管关闭这些下架中节点,知道下架完成。

hadoop dfsadmin -report

五、重新添加下架节点

当想要把这些节点重新添加回集群时,可以从 exclude 文件中删除节点,执行:

hadoop dfsadmin -refreshNodes

 

 

 

 

你可能感兴趣的:(Hadoop)