Hadoop问题解决-null\bin\winutils.exe和NativeIO$Windows.access0(Ljava/lang/String;I)Z问题

1.环境的的基本介绍

  • Hadoop版本: hadoop-2.7.2
  • 系统版本:Windows

2.问题描述

在Windows下操作Hadoop的MapReuce操作,发现提示如下错误信息:

java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

3.问题分析与解决

结合异常不难发现HADOOP_HOME_DIR值为null,基本上可以判断是 HADOOP_HOME环境变量的问题,所有我们要检查HADOOP_HOME环境变量的设置,检查要注意的是,我们设置的环境变量HADOOP_HOME要在系统变量中设置,等设置完成后,发现还未生效。所以我们要重启计算机。

Hadoop问题解决-null\bin\winutils.exe和NativeIO$Windows.access0(Ljava/lang/String;I)Z问题_第1张图片 图1.环境变量的设置

 但是呢,对于我而言,觉得重启计算机太过于繁琐,所以我们可以采用在代码中临时设置的方式,也可以产生相同的效果。代码如下:

System.setProperty("hadoop.home.dir", "C:\\hadoop-2.7.2");//路径按照自己的实际情况设置

 

添加如下代码后HADOOP_HOME这块就没有问题了,但是依旧提示有问题,最后查阅资料后发现,是我缺少了winutils.exe文件,所以我下载了相应版本的winutils.exe文件,具体的下载URL见后文,一定要版本对应。

4.新问题出现了

解决的上面的问题之后,发现又出现了新的错误,错误信息如下: 

org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z

出现这个的原因是: C:\Windows\System32下缺少hadoop.dll,把这个文件拷贝到C:\Windows\System32下面即可。问题解决。

5.写在最后

本文是题主遇到该问题时,在网上收集了各种资料后,解决了该问题,觉得收获颇多。故再次将其展示与博客,希望能和大家共勉,一起去贡献出更精彩的博客!

文章引用列表:

  • https://www.cnblogs.com/jessezeng/p/5520915.html
  • https://blog.csdn.net/congcong68/article/details/42043093

包下载地址:

winutils.exe和hadoop.dll下载链接:https://pan.baidu.com/s/1O-VWzO-2IZEH90-qYc3Yxg 提取码:tclv 

(在bin目录下)


题主只是一个入门的小学生,希望大家多多指教!如果该帖子确实能解决您的问题,望多多留言,谢谢!


你可能感兴趣的:(系统架构,服务器部署与配置,hadoop.dll)