Hadoop 1.x/2.x DataNode 下架 详解

Hadoop 1.x/2.x  DataNode 下架 详解

 

Hadoop 1.x/2.x DataNode 下架操作没有区别。

一、修改 hdfs-site.xml

在 hdfs-site.xml 配置文件中增加以下内容（NameNode 节点的配置文件）

 

  dfs.hosts.exclude
  <value>$HADOOP_HOME/etc/hadoop/excludevalue>
 # 本地文件系统创建一个文件（命名随意）(exclude)，Value的值就是该文件的路径

二、在 exclude 文件中 添加下架节点主机名

例如：需要下架的 DataNode节点的主机名分别为：slave5、slave6

则在 exclude 文件中添加需要下架的节点主机名，一个主机名一行。

 

slave5 slave6

三、重新载入 NameNode 配置，启动下架过程

下架的过程可能需要相当一段时间，因为他需要确保数据块的复制操作没有影响集群的其他任务。

hadooop dfsadmin -refreshNodes

四、监控命令

使用一下命令来监控下架进度，不管关闭这些下架中节点，知道下架完成。

hadoop dfsadmin -report

五、重新添加下架节点

当想要把这些节点重新添加回集群时，可以从 exclude 文件中删除节点，执行：

hadoop dfsadmin -refreshNodes