基于CENTOS6.5搭建Hadoop集群

一、安装虚拟机

二、环境nat配置

Nat设置:查看得到192.168.201.2

su命令,打开以下文件,删除其他行以得到下图:

基于CENTOS6.5搭建Hadoop集群_第1张图片

添加以下行:

基于CENTOS6.5搭建Hadoop集群_第2张图片

对slave1和slave2也做同样操作:

基于CENTOS6.5搭建Hadoop集群_第3张图片


三、配置JDK环境

共享目录share到Linux系统(/mnt/hgfs/share)

基于CENTOS6.5搭建Hadoop集群_第4张图片基于CENTOS6.5搭建Hadoop集群_第5张图片基于CENTOS6.5搭建Hadoop集群_第6张图片基于CENTOS6.5搭建Hadoop集群_第7张图片

基于CENTOS6.5搭建Hadoop集群_第8张图片

配置文件修改:

修改~/.bashrc文件

基于CENTOS6.5搭建Hadoop集群_第9张图片基于CENTOS6.5搭建Hadoop集群_第10张图片基于CENTOS6.5搭建Hadoop集群_第11张图片

配置slave1和slave2:

基于CENTOS6.5搭建Hadoop集群_第12张图片

四、开始安装hadoop

基于CENTOS6.5搭建Hadoop集群_第13张图片


tmp文件存放临时文件:

基于CENTOS6.5搭建Hadoop集群_第14张图片

vim masters:把文件内容改为master

基于CENTOS6.5搭建Hadoop集群_第15张图片基于CENTOS6.5搭建Hadoop集群_第16张图片基于CENTOS6.5搭建Hadoop集群_第17张图片基于CENTOS6.5搭建Hadoop集群_第18张图片基于CENTOS6.5搭建Hadoop集群_第19张图片基于CENTOS6.5搭建Hadoop集群_第20张图片基于CENTOS6.5搭建Hadoop集群_第21张图片基于CENTOS6.5搭建Hadoop集群_第22张图片基于CENTOS6.5搭建Hadoop集群_第23张图片基于CENTOS6.5搭建Hadoop集群_第24张图片基于CENTOS6.5搭建Hadoop集群_第25张图片

slave1和slave2做同样修改,为了访问机器的时候不用输入IP地址

基于CENTOS6.5搭建Hadoop集群_第26张图片基于CENTOS6.5搭建Hadoop集群_第27张图片

基于CENTOS6.5搭建Hadoop集群_第28张图片

slave1和slave2也做类似修改

基于CENTOS6.5搭建Hadoop集群_第29张图片

基于CENTOS6.5搭建Hadoop集群_第30张图片基于CENTOS6.5搭建Hadoop集群_第31张图片基于CENTOS6.5搭建Hadoop集群_第32张图片基于CENTOS6.5搭建Hadoop集群_第33张图片基于CENTOS6.5搭建Hadoop集群_第34张图片

关闭防火墙

基于CENTOS6.5搭建Hadoop集群_第35张图片

关闭selinux

基于CENTOS6.5搭建Hadoop集群_第36张图片


配置ssh免登陆密码

基于CENTOS6.5搭建Hadoop集群_第37张图片基于CENTOS6.5搭建Hadoop集群_第38张图片

对slave1和slave2也做类似修改

PS:注意本人操作的时候并没有authorized keys文件,所以通过master机器复制id_rsa.pub并重定向到authorized keys文件,从而创建了这个文件。

然后把slave1和slave2的id_rsa.pub文件的内容依次复制到master的authorized keys文件里。

基于CENTOS6.5搭建Hadoop集群_第39张图片基于CENTOS6.5搭建Hadoop集群_第40张图片基于CENTOS6.5搭建Hadoop集群_第41张图片基于CENTOS6.5搭建Hadoop集群_第42张图片基于CENTOS6.5搭建Hadoop集群_第43张图片基于CENTOS6.5搭建Hadoop集群_第44张图片基于CENTOS6.5搭建Hadoop集群_第45张图片

五、验证hadoop集群是否已搭建好9

基于CENTOS6.5搭建Hadoop集群_第46张图片基于CENTOS6.5搭建Hadoop集群_第47张图片基于CENTOS6.5搭建Hadoop集群_第48张图片基于CENTOS6.5搭建Hadoop集群_第49张图片基于CENTOS6.5搭建Hadoop集群_第50张图片基于CENTOS6.5搭建Hadoop集群_第51张图片

以下是针对slave1和slave2的验证

基于CENTOS6.5搭建Hadoop集群_第52张图片基于CENTOS6.5搭建Hadoop集群_第53张图片

回到master机器上:

基于CENTOS6.5搭建Hadoop集群_第54张图片基于CENTOS6.5搭建Hadoop集群_第55张图片基于CENTOS6.5搭建Hadoop集群_第56张图片

至此,成功搭建hadoop集群。


Hadoop安装教程参考:

1、http://www.cnblogs.com/studyzy/p/4389891.html

2、http://www.cnblogs.com/xzjf/p/7231519.html

3、http://blog.csdn.net/downing114/article/details/62883041(most important)

4、http://blog.csdn.net/se7en_q/article/details/47258007


你可能感兴趣的:(Hadoop)