Ubuntu安装pig-0.17.0

来源:互联网 发布:淘宝店铺认证照片要求 编辑:程序博客网 时间:2024/06/16 03:44

1.下载

下载地址:http://mirrors.shuosc.org/apache/pig/

2.配置环境变量

## Setting Pigexport PIG_HOME=/usr/local/software/pig-0.17.0export PIG_CLASSPATH=${HADOOP_HOME}/confexport PATH=${PATH}:${PIG_HOME}/bin

3.配置pig.properties

进入conf目录,打开pig.propeties

fs.default.name=hdfs://192.168.1.100:9000  mapred.job.tracker=192.168.1.100:9001
这两个配置就是core-site.xml和mapred-site.xml的配置内容

如果要更新pig日志路径

pig.logfile = /usr/local/software/pig-0.17.0/log

4.启动

这里可以查看pig版本,说明pig已经配置成功


首先启动hadoop,然后在启动pig,启动pig直接输入pig或者pig x -local即可。

5.测试

Pig的一些命令操作:这个感觉是不是比比hadoop总是来个hadoop dfs -好多了。


至此,pig的配置已经完成,pig配置相对于其它几个工具,配置算是非常简单的了。