您的位置:首页 > 运维架构

hadoop无法加载本地库

2017-03-15 00:00 106 查看
摘要: Unable to load native-hadoop library for your platform

centos上安装配置完hadoop,每次执行hadoop命令,总会出现警告:Unable to load native-hadoop library for your platform。

使用hadoop的版本是:http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz

在网上查了一下,说是要加环境变量

vim /etc/profile
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"

# 保存

source /etc/profile

停止、启动hadoop,还是会出现一样的警告。

还有种说法是HADOOP_OPTS配置应该如下:

vim /etc/profile
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native"

但还是不起作用。

最后发现:操作系统的版本是32位,执行如下命令,没有看到64的字样

uname -a

Linux dev3 2.6.32-642.1.1.el6.i686 #1 SMP Tue May 31 20:41:01 UTC 2016 i686 i686 i386 GNU/Linux

查看hadoop的本地库信息信息,可以看到是64位的,与32位操作系统不一致

file $HADOOP_HOME/lib/native/libhadoop.so.1.0.0

/root/hadoop/hadoop-2.7.3/lib/native/libhadoop.so.1.0.0: ELF 64-bit LSB shared object, x86-64, version 1 (SYSV), dynamically linked, not stripped

最后:安装64位的centos,运行hadoop,没有上面的环境变量配置也不会有如上的警告。

最后的结论:hadoop的本地库版本要和操作系统的版本一致,不然加载不了。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  Hadoop 安装配置