Unable to load native-hadoop library的解决方法

我的机器学习教程「美团」算法工程师带你入门机器学习   已经开始更新了,欢迎大家订阅~

任何关于算法、编程、AI行业知识或博客内容的问题,可以随时扫码关注公众号「图灵的猫」,加入”学习小组“,沙雕博主在线答疑~此外,公众号内还有更多AI、算法、编程和大数据知识分享,以及免费的SSR节点和学习资料。其他平台(知乎/B站)也是同名「图灵的猫」,不要迷路哦~

 

 

 

 

 

今天跑Hadoop的文件命令,报了一个这样的错误(其实是warning):

 

虽说不影响任务进程,不过看起来确实不好看(强迫症受不了)。自己捣鼓了一下发现是编译版本不对齐导致的问题,重新编译过于浪费时间,所以直接把警告消息mute掉就好:

具体操作是直接在log4j日志中去除告警信息。在/$HADOOP_HOME/etc/hadoop/log4j.properties

cd /usr/local/hadoop-2.9.1/etc/hadoop/
vim log4j.properties

在文件最后一行加入:

log4j.logger.org.apache.hadoop.util.NativeCodeLoader=ERROR  

再运行命令,显示一切正常

你可能感兴趣的:(Hadoop/Spark,***大数据框架***)