异常解决:util.NativeCodeLoader: Unable to load native-hadoop library for your platform

来源:互联网 发布:网络门禁模块 编辑:程序博客网 时间:2024/06/05 00:08

刚装好Hadoop的时候,每次输入命令运行都会出现:

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-Javaclasses where applicable

提示hadoop不能加载本地库。

以前官网会提供32位的安装包,但目前提供的下载包为64位的,在Linux 32位系统下安装后会一直提示错误“WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-javaclasses where applicable ”,但官网又不提供32位系统下的安装包,所以我们只能自己编译打包源码。

大家可以到$HADOOP_HOME/lib/native下,查看文件libhadoop.so.1.0.0,里面会显示Hadoop的位数,官网下载好的显示是64位的,截图如下:

这里写图片描述

如果你是64位操作系统,可以直接跳到第二步。

本地编译源码

具体操作看前一篇,这里

最后编译完以后,目标在

hadoop-2.7.1-src/hadoop-dist/target/hadoop-2.7.1下,将此目录下的lib/native替换掉$HADOOP_HOME/lib/native

配置环境变量

在/etc/profile中,添加下面配置:

export  HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/nativeexport  HADOOP_HOME=/home/hadoop/labc/hadoop-2.7.1export  HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib:$HADOOP_COMMON_LIB_NATIVE_DIR"
  • 1
  • 2
  • 3

最后记得使配置生效:source /etc/profile

并把相同配置添加到hadoop-env.sh文件末尾。

输入如下命令,没有报warn,说明修改成功。

这里写图片描述

阅读全文
0 0
原创粉丝点击