hadoop2.X本地库编译问题INFO util.NativeCodeLoader - Unable to load native-hadoop library for your platform.

来源:互联网 发布:cxf webservice json 编辑:程序博客网 时间:2024/06/05 00:46

<span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);">官网上hadoop提供的安装包是在32位系统下编译,一般我们都现在用是64位系统,如果直接来安装的话,会有一些错误或者警告信息,这种情况下,我们最好是在自己的系统上编译hadoop源码,参照:</span><a target=_blank href="http://blog.csdn.net/enson16855/article/details/35568049" target="_blank" style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);">http://blog.csdn.net/enson16855/article/details/35568049</a>

这种情况下编译不会直接输出hadoop本地库,会出现INFO util.NativeCodeLoader - Unable to load native-hadoop library for your platform.的错误

自己动手编译本地库就OK啦~

1、确保linux系统上安装了cmake,没有的话使用yum安装即可

2、在hadoop源码目录执行:

mvn package -Pdist,native -DskipTests -Dtar



表示编译成功

查看:

hadoop-dist/target/hadoop-2.7.1/lib/native 编译后的文件
将lib包拷贝到hadoop安装包即可

0 0
原创粉丝点击