配置HDFS联邦

配置etc/hadoop/hdfs-site.xml


 
 dfs.nameservices
 ns1,ns2
 

 
 dfs.namenode.rpc-address.ns1
 snn-host1:rpc-port
 
 
 dfs.namenode.http-address.ns1
 snn-host2:http-port
 
 
 dfs.namenode.secondaryhttp-address.ns1
 snn-host1:http-port
 

 
 dfs.namenode.rpc-address.ns2
 snn-host2:rpc-port
 
 
 dfs.namenode.http-address.ns2
 snn-host2:http-port
 
 
 dfs.namenode.secondaryhttp-address.ns2
 snn-host2:http-port
 

 

格式化名称节点

格式化的第一个节点可以不指定ID,但是格式化第二个节点必须指定ID, 否则不会聚合在一个集群中

Step 1: 格式化其中一个节点, 不指定clusterId则自动生成

./bin/hdfs namenode -format [-clusterId ]

Step 2: 格式化另外一个节点, 注意clusterId要和之前的节点一样

./bin/hdfs namenode -format -clusterId