Hadoop2.6.0伪分布环境搭建

 

Hadoop2.6.0伪分布环境搭建

用到的软件:

Hadoop2.6.0伪分布环境搭建_第1张图片

一、安装jdk

1、要安装的jdk,我把它拷在了共享文件夹里面。

  (用优盘拷也可以)

Hadoop2.6.0伪分布环境搭建_第2张图片

2、我把jdk拷在了用户文件夹下面。

(其他地方也可以,不过路径要相应改变)

Hadoop2.6.0伪分布环境搭建_第3张图片

3、执行复制安装解压命令:

 解压完毕:

 Hadoop2.6.0伪分布环境搭建_第4张图片

查看解压的文件夹:

Hadoop2.6.0伪分布环境搭建_第5张图片

4、配置 环境变量:

写入如下5行代码:

Hadoop2.6.0伪分布环境搭建_第6张图片

使配置生效:

5、查看安装的jdk

java -version

java

Hadoop2.6.0伪分布环境搭建_第7张图片

javac

 Hadoop2.6.0伪分布环境搭建_第8张图片

 

二、SSH免密码登陆:

1、安装SSH


2、是否生成 .ssh 目录:

 

3、如果没有生成,自己手动创建一个 .ssh 目录:

 

生成的 .ssh 目录:

 

4、生成公钥与私钥:

效果如下:

 Hadoop2.6.0伪分布环境搭建_第9张图片

5、将公钥加入到用于认证的公钥文件中:

 

6、免密码登陆:

效果:

 Hadoop2.6.0伪分布环境搭建_第10张图片

 

 

Ubuntu 免密码登陆,SSH配置完。

 

三、安装配置Hadoop

 

1、复制安装解压Hadoop

 

解压完毕效果:

 Hadoop2.6.0伪分布环境搭建_第11张图片

2、配置 etc/profile

 

 


 

3、配置 hadoop-env.sh

进入

 





4、修改hadoop-2.6.0文件权限为用户权限:

默认没有mapred-site.xml文件,复制mapred-site.xml.template一份,并把名字改为mapred-site.xml

Hadoop2.6.0伪分布环境搭建_第12张图片

5、配置下面4个重要文件:

mapred-site.xml

 

 Hadoop2.6.0伪分布环境搭建_第13张图片

core-site.xml

 

 Hadoop2.6.0伪分布环境搭建_第14张图片

hdfs-site.xml

 

 Hadoop2.6.0伪分布环境搭建_第15张图片

yarn-site.xml

 

 Hadoop2.6.0伪分布环境搭建_第16张图片

6、格式化:

格式化部分效果:

Hadoop2.6.0伪分布环境搭建_第17张图片

7、启动:

先启动  start-dfs.sh

效果:

Hadoop2.6.0伪分布环境搭建_第18张图片

再启动  start-yarn.sh

效果:

Hadoop2.6.0伪分布环境搭建_第19张图片

关闭hadoop:

 Hadoop2.6.0伪分布环境搭建_第20张图片

 

 

(注:也可以  sbin/start-all.sh:  建议分开启动。)效果一样,如下:

 Hadoop2.6.0伪分布环境搭建_第21张图片

8、查看Web页面信息:

 Hadoop2.6.0伪分布环境搭建_第22张图片

 

 

 Hadoop2.6.0伪分布环境搭建_第23张图片

 

至此,hadoop-2.6.0伪分布配置成功。

 

你可能感兴趣的:(开发工具,Hadoop旅程)