Hadoop的配置文件详解

注:我的示范代码种三台机器的名字为node1、node2、node3,示范代码中需要替换成你自己的

1、slaves

node1
node2
node3
hadoop3.0以后slaves更名为workers了

2、hadoop-env.sh


# 由于hadoop是基于java语言的程序,所以,需要配置JDK
export JAVA_HOME=/server/jdk1.8.0_171

3、core-site.xml


	
	
		fs.defaultFS
		hdfs://xiaob01:9000
	

	
	
		hadoop.tmp.dir
		/home/hadoop/tmp
	

4、hdfs-site.xml


	
	
		dfs.replication
		2
	
	
	
		dfs.namenode.secondary.http-address
		node2:50090
	

5、mapred-site.xml


		
	
		mapreduce.framework.name
		yarn
		

6、yarn-site.xml



	
	
		yarn.resourcemanager.hostname
		node1
		
	
	
        yarn.nodemanager.aux-services
        mapreduce_shuffle
      

配置文件不能够有中文,所以记得把注释去掉

完整配置文件下载地址,除了主机名外无需再做修改
https://download.csdn.net/download/xiao_xiao_b/11245074

你可能感兴趣的:(大数据学习)