Hadoop入门(十一)——集群崩溃的处理方法（图文详解步骤2021）

Hadoop入门(十一)——集群崩溃的处理方法（图文详解步骤2021）

既然这章讲的是集群崩溃的处理方法，因此我们先把一个集群搞崩溃
接Hadoop入门(十)，上回已经把集群配置好了，并测试可运行。
我们接下来将其搞崩溃

当然这次如果是重新打开虚拟机的话，需要重新启动集群
注意：这次就不需要初始化了

启动集群

回顾一下启动集群的操作

1. 启动HDFS
   [leokadia@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh
2. 在配置了 ResourceManager 的节点 （hadoop103 ）启动 YARN
   [leokadia@hadoop103 hadoop-3.1.3]$ sbin/start-yarn.sh

接下来我们一通神操作将其搞崩溃

搞崩集群的步骤（如果是已经被搞崩了跳过这里，直接看后面的解决办法）

将102，103，104三份集群的数据都删掉
看数据能不能被下载
再点击页面的下载

发现失败

想到的第一个解决办法是格式化
[leokadia@hadoop102 hadoop-3.1.3]$ hdfs namenode -format

但提示先停掉集群
[leokadia@hadoop103 hadoop-3.1.3]$ sbin/stop-yarn.sh

[leokadia@hadoop102 hadoop-3.1.3]$ sbin/stop-dfs.sh

发现集群已经ok了

再试下能不能正常启动呢？

能正常启动，但是NameNode没了
查看目录，原来之前我们把DataNode中的name删了

那怎么办？
格式化？

格式化成功
进入相应目录查看，

发现版本号跟上一个数据的不一样
此时进入HDFS网页

发现集群起不来了
查看一下什么情况



发现没有NameNode了，
此时开始慌了，集群崩溃了，进入正题！

正确的处理方法

（1）先回到目录

[leokadia@hadoop102 current]$ cd $HADOOP_HOME

（2）先杀死进程

[leokadia@hadoop102 hadoop-3.1.3]$ sbin/stop-dfs.sh

（3）删除每一个集群上的data和logs

[leokadia@hadoop102 hadoop-3.1.3]$ rm -rf data/ logs

（4）最后再进行格式化

[leokadia@hadoop102 hadoop-3.1.3]$ hdfs namenode -format

（5）初始化后再次启动集群

打扫干净屋子再启动
先停进程，再清历史数据，再格式化，最后启动

[leokadia@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh
进入网页，可以看见网页可以出现了，但数据都被清空了

查看jps有NameNode了！