Hadoop LZO 安装教程
来源:互联网 发布:网络教育概念股 编辑:程序博客网 时间:2024/04/30 06:18
1.安装 hadoop-gpl-compression
1.1 wget http://hadoop-gpl-compression.apache-extras.org.codespot.com/files/hadoop-gpl-compression-0.1.0-rc0.tar.gz
1.2 mv hadoop-gpl-compression-0.1.0/lib/native/Linux-amd64-64/* $HADOOP_HOME/lib/native/Linux-amd64-64/
1.1 wget http://hadoop-gpl-compression.apache-extras.org.codespot.com/files/hadoop-gpl-compression-0.1.0-rc0.tar.gz
1.2 mv hadoop-gpl-compression-0.1.0/lib/native/Linux-amd64-64/* $HADOOP_HOME/lib/native/Linux-amd64-64/
1.3 cp hadoop-gpl-compression-0.1.0/hadoop-gpl-compression-0.1.0.jar /usr/local/hadoop-1.0.2/lib/
2.安装 lzo
apt-get install gcc
apt-get install lzop
3.在本地测试 可以 执行 压缩及解压缩命令
下载 https://github.com/kevinweil/hadoop-lzo/zipball/master
解压包
export CFLAGS=-m64
export CXXFLAGS=-m64
//用于 hadoop0.20 ,所以1.0未必适用
进行build
ant compile-native tar
将生成的 build/hadoop-lzo-0.4.15.jar cp 到 /usr/local/hadoop-1.0.2/lib
测试解压程序
bin/hadoop jar /usr/local/hadoop-1.0.2/lib/hadoop-lzo-0.4.15.jar com.hadoop.compression.lzo.LzoIndexer /home/hadoop/project_hadoop/aa.html.lzo
- Hadoop LZO 安装教程
- hadoop-lzo 安装教程
- hadoop lzo安装
- 安装hadoop-lzo
- hadoop中安装lzo
- hadoop安装lzo
- hadoop lzo安装
- hadoop-lzo安装
- hadoop-lzo 安装手册
- hadoop hbase lzo 安装笔记
- hadoop集群lzo的安装
- Hadoop lzo详细安装手册
- hadoop-lzo-0.4.20安装
- hadoop的lzo插件安装
- Hadoop 2.x(YARN)安装配置LZO
- Hadoop LZO的安装与配置
- Centos之hadoop之lzo库安装
- Hadoop Lzo
- JVM
- linux 内核驱动编程 简单例子 与_IO, _IOR, _IOW, _IOWR 宏解析
- java web开发 购物车功能实现
- android java获取当前时间的总结
- 如何使用Proxy模式及Java内建的动态代理机制
- Hadoop LZO 安装教程
- JVM优化
- 在Linux下使用goagent遇到的问题和解决办法
- Android UncaughtExceptionHandler捕获崩溃异常
- php正则匹配汉字!
- PDF屏蔽打印,隐藏工具栏和菜单栏
- 崩溃
- Secure Network (ssh端口映射)-----图详细可以使用
- normal socket ioctl to net interface ioctl