Hive的组成模块

来源:互联网 发布:淘宝卖家5天不发货 编辑:程序博客网 时间:2024/05/16 08:40

Hive的模块非常类似于传统的数据库的模块,下面是Hive的必要组成模块以及对应的功能介绍


HiveQL:这是Hive的数据查询语言,与SQL非常类似。Hive提供了这个数据查询语言与用户的接口,包括一个

shell的接口,可以进行用户的交互,以及网络接口与JDBC接口。


JDBC接口可以用于编程,与传统的数据库编程类似,使得程序可以直接使用Hive功能而无需更改


Driver: 执行的驱动,用以将各个组成部分形成一个有机的执行系统,包括会话的处理,查询获取以及执行驱动


Compiler:Hive需要一个编译器,将HiveQL语言编译成中间表示,包括对于HiveQL语言的分析,执行计划的生成以及优化等工作


Execution Engine:执行引擎,在Driver的驱动下,具体完成执行操作,包括MapReduce执行,或者HDFS操作,或者元数据操作


Metastore:用以存储元数据:存储操作的数据对象的格式信息,在HDFS中的存储位置的信息以及其他的用于数据转换的信息SerDe等



0 0
原创粉丝点击