Windows下本地hadoop环境搭建

首先声明,由于课程需要搭建hadoop环境而本人又不太懂这些,在多个教程的结合下才搭建完成,以下内容用来总结如何搭建(可能存在一些不太确定的小问题)。

我使用的版本为hadoop-3.1.3版本,安装路径为E:\QQ\文件\2020\hadoop-3.1.3
前提:先配置jdk环境变量以及hadoop的安装

1、首先配置环境变量 :
hadoop-3.1.3的bin和sbin需要在path和hadoop_home中配置(此处不太确定是在path中还是HADOOP_HOME中配置,所以都进行了配置)
Windows下本地hadoop环境搭建_第1张图片

2、新建文件夹 :
在hadoop-3.1.3下新建data和workplace文件夹
data内新建namecode和datacode文件夹
workplace内新建name和tmp文件夹(如下图所示)
Windows下本地hadoop环境搭建_第2张图片
Windows下本地hadoop环境搭建_第3张图片
Windows下本地hadoop环境搭建_第4张图片
3、修改hadoop-3.1.3\etc\路径下的core-site.xml和hdfs-site.xml
core-site.xml中的tmp和name的路径根据自己的路径进行替换
hdfs-site.xml中的namenode和datanode的路径根据自己的路径进行替换
(对应第二步中datanode、 namenode、 temp和name的文件夹的路径)
注意盘符前有“/” 注意路径中间间隔是“/” (不知道影不影响 尽量别改”/”)
Windows下本地hadoop环境搭建_第5张图片
Windows下本地hadoop环境搭建_第6张图片
4、打开cmd中进入hadoop-3.1.3的bin的路径 输入hadoop namenode -format
Windows下本地hadoop环境搭建_第7张图片
5、打开cmd进入sbin路径 输入start-all.cmd,会跳出四个cmd窗口
然后输入jps -
Windows下本地hadoop环境搭建_第8张图片

下图是jps命令运行的结果Windows下本地hadoop环境搭建_第9张图片
以下是输入start-all.cmd运行的结果
Windows下本地hadoop环境搭建_第10张图片

6、在浏览器输入http://localhost:9870/可访问hadoop的web界面
Windows下本地hadoop环境搭建_第11张图片
由于只是进行hadoop环境的搭建所以没有对hadoop配置等进行过多说明,欢迎交流疑问(虽然我也不太会T.T)。
以上若有侵权请联系我,谢谢。

你可能感兴趣的:(hadoop)