hive与pig的重要区别是什么?

来源:互联网 发布:python r 量化投资 编辑:程序博客网 时间:2024/04/29 13:35

我们知道hive、pig都提供了一种脚本语法,便于我们快速构建mapreduce任务,不同的是hive的语法类似sql,而pig的语法类似于shell,请教各位同学,它们两个的重要区别是什么?另外在具体应用时,这两个工具又应该如何选择?

我感觉Hive和Pig本质上应该是没有区别的,都是建立在hadoop之上对数据进行处理和分析得到想要结果,区别:
1、hive 是一个类似sql语法的数据语言,pig是一个高级抽像的数据流语言,编程语言,简化hadoop常见的工作任务。
2、hive可以做为数据仓库,可以把数据按照hive的压缩格式放到指定目录从而对数据分析,pig只是抽像了数据存储的模型,到分析时按数据模析去分析。
3、hive中可以执行插入、删除等,但Pig我没有发现可以插入数据的方法。
4、hive有schemas和分区的概念,pig就只知道要加载数据的分隔格式
5、pig 无jdbc,hive有的。

6、hive给数据库管理员用,pig给运维人员用。

0 0
原创粉丝点击