win10 Hadoop3.1.1配置

楔子

win10安装 Hadoop 尝试失败,尝试编译,由于环境没搞好,也失败了,win10上最好安装一些旧版本的 hadoop 或者CHD版本的

winutils 下载

下载地址https://github.com/steveloughran/winutils
win10 Hadoop3.1.1配置_第1张图片

配置文件

1 core-site.xml

<configuration>
	
	<property>
		<name>hadoop.tmp.dirname>
		<value>/D:/soft/bd/hdata/hadoopvalue>
		
	property>

	<property>
		<name>fs.defaultFSname>
		<value>hdfs://localhost:9820value>
	property>
configuration>

2 hdfs-site.xml

<configuration>
	
	<property>
		<name>dfs.replicationname>
		<value>1value>
	property>
	<property>
		<name>dfs.permissions.enabledname>
		<value>falsevalue>
	property>
configuration>

3 mapred-site.xml

<configuration>
	<property>
		<name>mapreduce.framework.namename>
		<value>yarnvalue>
	property>
configuration>

4 yarn-site.xml

<configuration>
	
	<property>
		<name>yarn.nodemanager.aux-servicesname>
		<value>mapreduce_shufflevalue>
	property>
configuration>

遇到的问题

  1. 无法创建符号链接 我是使用RAR以管理员解压

win10 Hadoop3.1.1配置_第2张图片

  1. yarn 启动自动停止
    share\hadoop\yarn\timelineservice里面的jar复制到了share\hadoop\yarn

你可能感兴趣的:(Hadoop)