Hive:简单查询不启用Mapreduce job而启用Fetch task

来源:互联网 发布:deb文件安装到linux 编辑:程序博客网 时间:2024/06/17 00:29

我们都知道,启用MapReduce Job是会消耗系统开销的。对于这个问题,从Hive0.10.0版本开始,对于简单的不需要聚合的类似SELECT <col> from <table> LIMIT n语句,不需要起MapReduce job,直接通过Fetch task获取数据,可以通过下面几种方法实现:
set hive.fetch.task.conversion=more;

开启了Fetch任务,所以对于上述简单的列查询不在启用MapReduce job!

0 0
原创粉丝点击