hive map-side join
来源:互联网 发布:手机管理淘宝商品 编辑:程序博客网 时间:2024/05/16 15:54
hive 在map端进行连接的过程叫map-side join,应为hive可以和内存中的小表进行逐一匹配,进而可以省略掉常规操作的reduce过程。
hive 启动map-side join 需要把参数hive.auto.convert.join 参数设置为ture
hive> set hive.auto.convert.join;hive.auto.convert.join=true
Time taken: 81.278 seconds, Fetched: 345 row(s)
设置 set hive.auto.convert.join=false 执行相同的HQL,发现没有启用map-side join:
Time taken: 113.87 seconds, Fetched: 345 row(s)
hive> select /*+MAPJOIN(sp)*/ sp.provinceid,sp.provincename,sc.cityid,sc.cityname from s_province sp join s_city sc on sp.provinceid = sc.provinceid;
0 0
- hive map side join
- hive map-side join
- Hive Map Side Join解析
- Map side join
- map-side-join /Reduce-side-join
- MapReduce的Map side join
- MapReduce map side join实例
- hadoop join之map side join
- Hadoop 多表 join:map side join 范例
- Hadoop 多表 join:map side join 范例
- Hadoop 多表 join:map side join 范例
- Hadoop 多表 join:map side join 范例
- Hadoop join之map side join
- spark实现Map-side Join和Reduce-side Join
- Hadoop的Map-side join和Reduce-side join
- Hive Map Join
- Spark map-side-join 关联优化
- Spark map-side-join 关联优化
- Andriod Studio 生成@Bind即ButterKnife插件的安装与使用
- Ubuntu中更改所有子文件和子目录所有者权限
- linux命令之让配置立刻生效
- 小程序 input 获得焦点,填入内容,取得内容
- NioSocketConnector 报错?
- hive map-side join
- JavaWeb 入门级项目实战 -- 文章发布系统 (第七节)
- .NET-控件keyDown和keyPress事件
- WebKit/Chromium(webview)
- C#实现重定向的三个方法
- shell脚本:Syntax error: Bad for loop variable错误解决方法
- 人工神经网络
- Redis简介
- 问题咨询