hadoop-lzo-0.4.20安装
来源:互联网 发布:大智慧软件付费 编辑:程序博客网 时间:2024/04/30 05:33
一、安装lzop:
yum -y install lzop
二、安装lzo
1、wget http://www.oberhumer.com/opensource/lzo/download/lzo-2.06.tar.gz
2、tar -zxvf lzo-2.06.tar.gz
3、mv lzo-2.06 lzo && cd lzo
4、export CFLAGS=-m64
5、./configure -enable-shared
6、make && make install【默认安装在了/usr/local/lib下:liblzo2.a liblzo2.la liblzo2.so liblzo2.so.2 liblzo2.so.2.0.0】
7、在/etc/ld.so.conf.d/目录下新建lzo.conf文件,内容:
/usr/local/lib
8、让lzo.conf生效:/sbin/ldconfig -v
三、安装hadoop-LZO
1、下载源码:https://github.com/twitter/hadoop-lzo
2、解压后是hadoop-lzo-master,进入hadoop-lzo-master目录
3、export CFLAGS=-m64
4、export CXXFLAGS=-m64
5、export C_INCLUDE_PATH=/usr/local/include/lzo
6、export LIBRARY_PATH=/usr/local/lib
7、mvn clean package -Dmaven.test.skip=true【可能在hadoop-lzo-master目录下还有一个hadoop-lzo-master目录,就会抛MissingProjectException异常,找不到源码,需要进入hadoop-lzo-master/hadoop-lzo-master目录下编译,或者去掉一层hadoop-lzo-master目录】
8、在当前目录下生成了target,下面有个native/Linux-amd64-64/lib目录,将lib目录下的文件拷贝到hadoop的lib/native目录下:tar -cBf - -C target/native//Linux-amd64-64/lib . | tar -xBvf - -C /usr/local/hadoop/lib/native
yum -y install lzop
二、安装lzo
1、wget http://www.oberhumer.com/opensource/lzo/download/lzo-2.06.tar.gz
2、tar -zxvf lzo-2.06.tar.gz
3、mv lzo-2.06 lzo && cd lzo
4、export CFLAGS=-m64
5、./configure -enable-shared
6、make && make install【默认安装在了/usr/local/lib下:liblzo2.a liblzo2.la liblzo2.so liblzo2.so.2 liblzo2.so.2.0.0】
7、在/etc/ld.so.conf.d/目录下新建lzo.conf文件,内容:
/usr/local/lib
8、让lzo.conf生效:/sbin/ldconfig -v
三、安装hadoop-LZO
1、下载源码:https://github.com/twitter/hadoop-lzo
2、解压后是hadoop-lzo-master,进入hadoop-lzo-master目录
3、export CFLAGS=-m64
4、export CXXFLAGS=-m64
5、export C_INCLUDE_PATH=/usr/local/include/lzo
6、export LIBRARY_PATH=/usr/local/lib
7、mvn clean package -Dmaven.test.skip=true【可能在hadoop-lzo-master目录下还有一个hadoop-lzo-master目录,就会抛MissingProjectException异常,找不到源码,需要进入hadoop-lzo-master/hadoop-lzo-master目录下编译,或者去掉一层hadoop-lzo-master目录】
8、在当前目录下生成了target,下面有个native/Linux-amd64-64/lib目录,将lib目录下的文件拷贝到hadoop的lib/native目录下:tar -cBf - -C target/native//Linux-amd64-64/lib . | tar -xBvf - -C /usr/local/hadoop/lib/native
9、将target下的hadoop-lzo-xxx.jar拷贝到hadoop/lib下
参考资料:http://blog.csdn.net/wanglinzi/article/details/12318743
0 0
- hadoop-lzo-0.4.20安装
- hadoop lzo安装
- 安装hadoop-lzo
- Hadoop LZO 安装教程
- hadoop中安装lzo
- hadoop安装lzo
- hadoop lzo安装
- hadoop-lzo安装
- hadoop-lzo 安装教程
- hadoop-lzo 安装手册
- hadoop hbase lzo 安装笔记
- hadoop集群lzo的安装
- Hadoop lzo详细安装手册
- hadoop的lzo插件安装
- Hadoop 2.x(YARN)安装配置LZO
- Hadoop LZO的安装与配置
- Centos之hadoop之lzo库安装
- Hadoop Lzo
- 程序运行时的内存空间分布
- mysql-5.5.29-win32压缩版配置数据库,字符集设置,服务设置
- 大一 PROJECT REPORT#1 设计一个基于C的简单语言,并为其写编译器,汇编器,虚拟机
- 与一位研究生学长的谈话所感(大二下学期第三周)
- 添加LFS无线支持
- hadoop-lzo-0.4.20安装
- Determinant and area of a parallelogram
- 黑马程序员—线程基础知识部分总结
- 两个学习hadoop的网址
- hadoop安装遇到的各种异常及解决办法
- Spiral Matrix -- LeetCode
- 论execSQL与executeInsert执行效率之差
- 解决一个小问题:git下载Kernel源码时只有.git\objects\pack目录下的.pack文件,而没有自动提取
- tomcat启动startup.bat一闪而过