MAC解决Unable to load native-hadoop library for your platform

来源:互联网 发布:怎么改淘宝会员名手机 编辑:程序博客网 时间:2024/09/21 06:22

参考官方网站:http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-common/NativeLibraries.html

一、问题背景

Mac安装2.8.2版本的hadoop 


Apache提供的hadoop本地库是32位的,而在64位的服务器上就会有问题,因此需要自己编译64位的版本。首先找到对应自己hadoop版本的64位的lib包,可以自己手动去编译,但比较麻烦,也可以去网上找,好多都有已经编译好了的。


二、解决方案


1. 可以去网站:http://dl.bintray.com/sequenceiq/sequenceiq-bin/  下载对应的编译版本

2. 将准备好的64位的lib包解压到已经安装好的hadoop安装目录的lib/native(2.8.2版本没有这个文件夹,直接新建就好)

3. 增加环境变量

sudo vi /etc/profileexport HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native  export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"  source /etc/profile
三、验证



阅读全文
0 0
原创粉丝点击