(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复

前言

在hadoop的使用过程中,由于操作不善,导致集群数据丢失、宕机无法重启等等,这个时候我们如何将我们的hadoop集群恢复到初始化状态呢,本节内容就是针对hadoop集群由于误操作,或者数据丢失等等,我们想将错误数据清理,使hadoop集群恢复到初始化状态。以下是具体的操作过程。

正文

 ①检查hadoop集群状态,如果集群中存在hadoop的服务进程,将hadoop的所有服务组件都关闭

命令:myhadoop.sh status

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第1张图片

②关闭hadoop集群服务组件

命令:myhadoop.sh stop

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第2张图片

 ③清理hadoop集群安装目录下的data和logs目录

rm -rf /opt/module/hadoop-3.1.3/data

rm -rf /opt/module/hadoop-3.1.3/logs

④在hadoop101节点执行hdfs namenode -format命令,格式化namenode节点

命令:hdfs namenode -format

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第3张图片

⑤重启hadoop集群组件服务

命令:myhadoop.sh start

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第4张图片

⑥查看hadoop集群组件服务状态,组件都以启动完毕

命令:myhadoop.sh status

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第5张图片

⑦访问hadoop的web客户端测试集群是否启动成功

(十一)大数据实战——hadoop集群崩溃与故障的初始化恢复_第6张图片

结语

关于将hadoop集群恢复到初始化状态的内容到这里就结束了,其核心就是我们需要将旧的数据目录和日志目录删除,重新格式化我们的namenode节点,生成新的数据存储目录和日志目录,重新启动hadoop服务,这样一个初始化的hadoop环境就恢复好了。这样我们下期见。。。。。。

你可能感兴趣的:(大数据,#,hadoop,hadoop,大数据,hdfs)