在Hadoop集群中动态增加和减少机器

增加机器：
1、将新增加的机器配置文件配好
2、将新增加的机器主机名/IP添加到Master机器中的$HADOOP_HOME$/conf/slaves文件中
3、在新增加的机器中输入以下命令

引用

$ cd path/to/hadoop
$ bin/hadoop-daemon.sh start datanode
$ bin/hadoop-daemon.sh start tasktracker

4、在Master机器上输入以下命令

引用

$bin/hadoop  balancer

减少机器：
1、在$HADOOP_HOME$/conf/中建立文本文件excludes。
2、在excludes中写入要删除的机器主机名/IP（每行一个）。
3、在$HADOOP_HOME$/onf/hadoop-site.xml文件中添加如下代码：

引用

<property>                                                                                                                       
        <name>dfs.hosts.exclude</name>                                                                                             
        <value>excludes</ value>                                                                                                    
</property> 

4、执行如下代码

引用

$bin/hadoop dfsadmin -refreshNodes