当前位置:   article > 正文

Hadoop之Unable to load native-hadoop library问题解决

unable to load native-hadoop library

在安装好Hadoop后,每次输入命令都会出现下面警告:

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Stopping namenodes ...

提示hadoop不能加载本地库。
可以到$HADOOP_HOME/lib/native下,查看文件libhadoop.so.1.0.0,里面会显示Hadoop的位数,官网下载好的显示是64位的,如下所示:

  1. [hadoop@dxer hadoop-2.6.4]$ cd lib/native/
  2. [hadoop@dxer native]$ ls
  3. libhadoop.a libhadooppipes.a libhadoop.so libhadoop.so.1.0.0 libhadooputils.a libhdfs.a libhdfs.so libhdfs.so.0.0.0
  4. [hadoop@dxer native]$ file libhadoop.so.1.0.0
  5. libhadoop.so.1.0.0: ELF 64-bit LSB shared object, x86-64, version 1 (SYSV), dynamically linked, BuildID[sha1]=b3b5e812c2a91fa4b28aa33eb76dc6889d3b91e9, not stripped
  6. [hadoop@dxer native]$

文件和操作系统都是64位的那为什么还会出现这样的警告呢。肯定是少了什么配置,没让库文件加载进去。

只需要进行简单配置即可。

配置如下:

  1. 首先在bashrc中加入如下配置:

vim ~/.bashrc

配置如下

  1. export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
  2. export HADOOP_HOME=/home/hadoop/hadoop-2.6.4
  3. export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib:$HADOOP_COMMON_LIB_NATIVE_DIR"
  1. 使上面配置生效:

source ~/.bashrc

ok,再去执行启动dfs/yarn或者运行hadoop相关命令的时候就不会再有上面的提示啦。



作者:digger30
链接:https://www.jianshu.com/p/f25a0caafcc6
來源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/酷酷是懒虫/article/detail/851352
推荐阅读
相关标签
  

闽ICP备14008679号