centos6下安装hadoop集群

安装集群环境:
克隆虚拟机后:
1.恢复网卡:
vi /etc/udev/rules.d/70-persistent-net.rules
删除etho,将eth1改为eth0

		2.修改ip:
			vi /etc/sysconfig/network-scripts/ifcfg-eth0
			删除:HWADDR=00:0C....
			  UUID:..
			  
			修改:onboot=yes
			  BOOTPROTO=static
		
			添加:IPADDR=
			  GATEWAY=(网管)
			  NETMASK=(子网掩码)
			  DNS1=网管
		3.修改主机名:
			vi /etc/sysconfig/network
			修改:HOSTNAME=
			
			
		4.重启;
			reboot
		
		5.方便pc段ping 给虚拟机添加别名
			c:windows/system32/drivers/etc/hosts

安装jdk:
1.解压:
rpm -ivh jdk-8u131-linux-x64.rpm
2.查看
Java -version
安装hadoop:
1.解压:
tar -zxvf hadoop-2.8.5.tar.gz -C /usr/apps/hadoop/
2.修改配置文件

		hadoop的配置文件在:/root/apps/hadoop安装目录/etc/hadoviewop/
		
		核心配置参数:
			1.指定hadoop的默认文件系统为:hdfs
			2.指定hdfs的namenode节点为那台机器
			3.指定namenode软件存储元数据的本地目录
			4.指定datanode软件存放文件块的本地目录

vi /etc/profile

export HADOOP_HOME=/usr/hadoop
export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin
export PATH= P A T H : PATH: PATH:HADOOP_HOME/sbin
export HADOOP_COMMON_LIB_NATIVE_DIR= H A D O O P H O M E / l i b / n a t i v e e x p o r t H A D O O P O P T S = " − D j a v a . l i b r a r y . p a t h = HADOOP_HOME/lib/native export HADOOP_OPTS="-Djava.library.path= HADOOPHOME/lib/nativeexportHADOOPOPTS="Djava.library.path=HADOOP_HOME/lib:$HADOOP_COMMON_LIB_NATIVE_DIR"
3.重启服务
source /etc/profile
4.查看是否成功
echo $HADOOP_HOME
5.修改hadoop-env.sh中的Java_Home变量为java的真实目录

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

6.配置Hadoop(/usr/hadoop/hadoop-2.8.5/etc/hadoop)

a.vi core-site.xml

在这里插入图片描述

centos6下安装hadoop集群_第1张图片

b.hdfs-site.xml

在这里插入图片描述

centos6下安装hadoop集群_第2张图片

7.格式化分布式硬盘

在这里插入图片描述

在这里插入图片描述

8.启动

centos6下安装hadoop集群_第3张图片

你可能感兴趣的:(centos6下安装hadoop集群)