当前位置:   article > 正文

hadoop WARN:Unable to load native-hadoop library_2023-06-26 09:32:16,782 [main] [org.apache.hadoop.

2023-06-26 09:32:16,782 [main] [org.apache.hadoop.util.nativecodeloader] [wa

已配置好环境,可以编译程序,但是启动hadoop 和每次运行命令 会出现以下警告(不影响使用,看着不舒服)

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

翻译:警告:无法为您的平台加载本机Hadoop库…使用可应用的Java类

 

解决方法:

一.在hadoop配置文件log4j.properties文件中添加以下内容,将警告无视掉

log4j.logger.org.apache.hadoop.util.NativeCodeLoader=ERROR

-----------------------------------------------------------------------------------------------------------------

 

二.在文件hadoop-env.sh中增加以下环境变量,使其指向hadoop本地lib

export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib/native"

 

1.还是有警告且出现Starting namenodes on [OpenJDK Client VM warning: You have loaded library /usr/local/hadoop/lib/native/libhadoop.so.1.0.0 which might have disabled stack guard. The VM will try to fix the stack guard now.

解决方法:查看系统位数(getconf LONG_BIT) 与 libhadoop.so.1.0.0是否一致(file libhadoop.so.1.0.0) 不一致在网上找对应位数native库或者自己编译或者换个操作系统。

 

2.还是有警告可以ldd libhadoop.so.1.0.0,出现version `GLIBC_2.14' not found

解决方法:可安装相应版本的glibc。

 

以上均亲测,可能由于版本或个人使用问题有细微差异

 

 

 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/不正经/article/detail/387327
推荐阅读
相关标签
  

闽ICP备14008679号