【原创】五、Hadoop 2.5.2分布式环境部署

一、地址规划


【原创】五、Hadoop 2.5.2分布式环境部署_第1张图片

二、

按照之前安装的机器,克隆两台机器,分别修改hostname、网卡和ip,配置NTP时间同步

修改主机名:vi /etc/sysconfig/network

修改ip:vi/etc/sysconfig/network-scripts/ifcfg-eth0

修改网卡:vi /etc/udev/rules.d/70-persistent-net.rules

Reboot重新启动。

三、

三台机器进行无密登陆配置。

Bigdata01===》bigdata01, bigdata02, bigdata03

Bigdata02===》bigdata01, bigdata02, bigdata03

ssh-keygen -t rsa

ssh-copy-id -i bigdata01.xxxx.com

ssh-copy-id -i bigdata02.xxxx.com

ssh-copy-id -i bigdata03.xxxx.com

Core配置

【原创】五、Hadoop 2.5.2分布式环境部署_第2张图片

Hdfs配置

【原创】五、Hadoop 2.5.2分布式环境部署_第3张图片

slaves配置

Yarn配置

【原创】五、Hadoop 2.5.2分布式环境部署_第4张图片

Mapreduce配置

【原创】五、Hadoop 2.5.2分布式环境部署_第5张图片

启动

1、bigdata01.xxxx.com进行namenode格式化。

[jit@bigdata01 hadoop-2.5.2]$ bin/hdfs namenode–format

然后启动hdfs

[jit@bigdata01 hadoop-2.5.2]$ sbin/start-dfs.sh

2、bigdata02.xxxx.com启动yarn

[jit@bigdata02 hadoop-2.5.2]$ sbin/start-yarn.sh

3、bigdata03.xxxx.com启动

[jit@bigdata03 app]$ sbin/mr-jobhistory-daemon.sh start historyserver

四、查看是否启动

【原创】五、Hadoop 2.5.2分布式环境部署_第6张图片

hdfs创建目录,上传文件,Mapreduce例子运行

【原创】五、Hadoop 2.5.2分布式环境部署_第7张图片

查看运行结果

你可能感兴趣的:(【原创】五、Hadoop 2.5.2分布式环境部署)