大数据准备——安装hadoop(下)

上一篇博客地址：https://blog.csdn.net/IPOmonkey/article/details/82802190

8.修改core-site.xml

vim core-site.xml

在标签中添加如下代码

标签中添加如下代码

	
		fs.defaultFS
		hdfs://hadoop01:9000
	
	
		hadoop.tmp.dir
		/home/software/hadoop-2.7.1/tmp
	

9.修改hdfs-site.xml

vim hdfs-site.xml

在标签中添加如下代码

	
		dfs.replication
		1
	
	
		dfs.permissions
		false
	

10.修改mapred-site.xml

> cp mapred-site.xml.template mapred-site.xml	
# 拷贝模板文件并重命名
> vim mapred-site.xml	

在标签中添加如下代码

标签中添加如下代码

	
		mapreduce.framework.name
		yarn
	

11.修改yarn-site.xml

vim yarn-site.xml	

在标签中添加如下代码

	
	
		yarn.resourcemanager.hostname
		hadoop01
	
	
		yarn.nodemanager.aux-services
		mapreduce_shuffle
	

12.配置slaves文件

vim slaves

写入hadoop01

13.配置hadoop的环境变量

> vim /etc/profile

修改配置文件，使hadoop命令可以在任何目录下执行，下面是修改后的代码。

JAVA_HOME=/home/software/jdk1.8.0_111 HADOOP_HOME=/home/software/hadoop-2.7.1 JAVA_BIN=/home/software/jdk1.8.0_111/bin PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export JAVA_HOME JAVA_BIN PATH CLASSPATH HADOOP_HOME

加粗的地方都是需要修改的地方，注意PATH多个参数值之间用冒号隔开，所有的参数都在$PATH之前

> source /etc/profile
# 使配置文件生效

14.格式化namenode

hadoop namenode -format

中间如果提示是否需要重新格式化，则根据自己的需求输入即可。

如果出现successfully formatted，则表示格式化成功。

15.启动分布式文件系统

> cd /home/software
> cd hadoop-2.7.1/
> cd sbin

进入Hadoop安装目录下的sbin目录，执行：sh start-dfs.sh

如果要停止,执行sh stop-dfs.sh

之后执行jps，如果出现下图则表示执行成功

16. HDFS控制台页面

通过浏览器访问，访问地址是(虚拟机的ip) ip:50070来查看hdfs系统