Unable to load native-hadoop library for your platform... using builtin-

来源:互联网 发布:opencv python 除水印 编辑:程序博客网 时间:2024/05/13 05:38

亲测有效!!
方法:
一,通常编译好的hadoop库是在lib中,如果你不想编译,可以用lib/native里面的预编译库,然后把native的库移动到lib文件夹中。

cp hadoop-2.6.0/lib/native/* hadoop-2.6.0/lib/

二,加入系统变量

export HADOOP_COMMON_LIB_NATIVE_DIR=/home/administrator/work/hadoop-2.6.0/lib/native
export HADOOP_OPTS=”-Djava.library.path=/home/administrator/work/hadoop-2.6.0/lib”
export HADOOP_ROOT_LOGGER=DEBUG,console

参考:http://www.mak-blog.com/spark-on-yarn-setup-multinode.html

0 0
原创粉丝点击