数据库学习纪要(二):hive-2
来源:互联网 发布:ubuntu配置jdk 编辑:程序博客网 时间:2024/05/22 08:14
七、DQL操作:数据查询SQL
7.1 基本的select操作
SELECT [ALL | DISTINCT] select_expr, select_expr, ...
FROM table_reference
[WHERE where_condition]
[GROUP BY col_list [HAVING condition]]
[ CLUSTER BY col_list
| [DISTRIBUTE BY col_list] [SORT BY| ORDER BY col_list]]
[LIMIT number]
1)使用ALL和DISTINCT选项区分对重复记录的处理。默认是ALL,表示查询所有记录。DISTINCT表示去掉重复的记录
Where 条件,类似我们传统SQL的where 条件
目前支持 AND,OR ,0.9版本支持between 、IN, NOT IN 不支持EXIST ,NOT EXIST
2)ORDER BY与SORT BY的不同:ORDER BY 全局排序,只有一个Reduce任务;SORT BY 只在本机做排序
3)Limit
Limit 可以限制查询的记录数:SELECT * FROM t1 LIMIT 5
实现Top k 查询
REGEX Column Specification
7.2 基于Partition的查询
一般 SELECT 查询会扫描整个表,使用 PARTITIONED BY 子句建表,查询就可以利用分区剪枝(input pruning)的特性
Hive 当前的实现是,只有分区断言出现在离 FROM 子句最近的那个WHERE 子句中,才会启用分区剪枝
7.3 Jion
Hive 只支持等值连接(equality joins)、外连接(outer joins)和(left semi joins)。Hive 不支持所有非等值的连接,因为非等值连接非常难转化到 map/reduce 任务
LEFT,RIGHT和FULL OUTER关键字用于处理join中空记录的情况
注意点:
1)只支持等值join
SELECT a.* FROM a JOIN b ON (a.id = b.id)
SELECT a.* FROM a JOIN b
ON (a.id = b.id AND a.department = b.department)
2)可以 join 多于 2 个表
SELECT a.val, b.val, c.val FROM a JOIN b
ON (a.key = b.key1) JOIN c ON (c.key = b.key2)
7.1 基本的select操作
SELECT [ALL | DISTINCT] select_expr, select_expr, ...
FROM table_reference
[WHERE where_condition]
[GROUP BY col_list [HAVING condition]]
[ CLUSTER BY col_list
| [DISTRIBUTE BY col_list] [SORT BY| ORDER BY col_list]]
[LIMIT number]
1)使用ALL和DISTINCT选项区分对重复记录的处理。默认是ALL,表示查询所有记录。DISTINCT表示去掉重复的记录
Where 条件,类似我们传统SQL的where 条件
目前支持 AND,OR ,0.9版本支持between 、IN, NOT IN 不支持EXIST ,NOT EXIST
2)ORDER BY与SORT BY的不同:ORDER BY 全局排序,只有一个Reduce任务;SORT BY 只在本机做排序
3)Limit
Limit 可以限制查询的记录数:SELECT * FROM t1 LIMIT 5
实现Top k 查询
REGEX Column Specification
7.2 基于Partition的查询
一般 SELECT 查询会扫描整个表,使用 PARTITIONED BY 子句建表,查询就可以利用分区剪枝(input pruning)的特性
Hive 当前的实现是,只有分区断言出现在离 FROM 子句最近的那个WHERE 子句中,才会启用分区剪枝
7.3 Jion
Hive 只支持等值连接(equality joins)、外连接(outer joins)和(left semi joins)。Hive 不支持所有非等值的连接,因为非等值连接非常难转化到 map/reduce 任务
LEFT,RIGHT和FULL OUTER关键字用于处理join中空记录的情况
注意点:
1)只支持等值join
SELECT a.* FROM a JOIN b ON (a.id = b.id)
SELECT a.* FROM a JOIN b
ON (a.id = b.id AND a.department = b.department)
2)可以 join 多于 2 个表
SELECT a.val, b.val, c.val FROM a JOIN b
ON (a.key = b.key1) JOIN c ON (c.key = b.key2)
阅读全文
0 0
- 数据库学习纪要(二):hive-2
- 数据库学习纪要(一):hive-1
- 数据库学习纪要(三):hive-3
- 数据库学习纪要(四):hive-4
- 数据库学习纪要(五):hive-5
- 数据库学习纪要(二十二):MySQL创建数据库、表,及导入CSV文件数据2
- 数据库学习纪要(二十):MySQL简介-4
- 数据库学习纪要(二十三):MySQL-3-SELECT
- 数据库学习纪要(二十四):MySQL-4-ALTER语句
- 数据库学习纪要(二十六):MySQL-6-子查询
- Python爬虫学习纪要(二):BeautifulSoup相关知识点2
- 数据库学习纪要(七):SQL语法-2
- 数据库学习纪要(十):SQL Sever介绍-2
- 数据库学习纪要(十八):MySQL简介-2
- 数据库学习纪要(二十一):MySQL创建数据库、表,及导入CSV文件数据1
- 数据库学习纪要(二十五):MySQL-5-扩展你的表
- 数据库学习纪要(二十七):MySQL-7-外联接、自联接与联合
- 数据库学习纪要(二十八):MySQL-8-部分数据函数
- Android隐藏app桌面图标
- HDU---2108
- OAuth和OpenID区别
- 选择类排序:选择排序和堆排序
- rsync 服务器搭建
- 数据库学习纪要(二):hive-2
- 字符设备驱动程序之misc_dev方式注册字符设备
- Spring Bean的生命周期
- 初识HBase
- fgets与fgetc函数
- table标记
- https实践之 抓包分析流程
- Oracle 删除用户、当前用户数据库表、表空间的过程
- JVM虚拟机调优---------垃圾收集器算法