hadoop配置webUI日志(解决web jobhistory没有job日志记录问题)

配置mapred-site.xml


	
	
		mapreduce.jobhistory.address
		localhost:10020
	
	
	
		mapreduce.jobhistory.webapp.address
		localhost:19888
	
	
	  mapreduce.jobhistory.done-dir
	  /history/done
	
	
	  mapreduce.jobhistory.intermediate-done-dir
	  /history/done_intermediate
	
	
		mapreduce.framework.name
		yarn
	

配置yarn-site.xml

 

	
	
	yarn.log-aggregation-enable
	true
	
	
		yarn.nodemanager.aux-services
		mapreduce_shuffle
	

重启historyserver服务
./mr-jobhistory-daemon.sh start historyserver
./mr-jobhistory-daemon.sh start historyserver
查看端口号是否启动成功
netstat -nltp

跑一个job
hadoop jar hadoop-mr-counter-2.9.1.jar com.org.chapter7.counter.ToolRunnerJS_Demo7_1 input output(这里是我自己的一个jar包,仅供参考)
打开浏览器,进入localhost:19888
hadoop配置webUI日志(解决web jobhistory没有job日志记录问题)_第1张图片
转载请带上本文连接,谢谢!

你可能感兴趣的:(云计算与大数据)