Hive中创建表(hive的使用和MySQL的使用很相似)
来源:互联网 发布:nginx记录ip 编辑:程序博客网 时间:2024/05/24 04:40
CREATE TABLE语句
(不区分大小写)
Create Table是用于在Hive中创建表的语句,语法和示例如下:
语法:
CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][ROW FORMAT row_format][STORED AS file_format]
示例:
假设需要使用CREATE TABLE语句创建一个名为employee表,下表列出了employee表中的字段和数据类型:
创建表的语句如下:
hive> CREATE TABLE IF NOT EXISTS employee ( eid int, name String,> salary String, destination String)> COMMENT ‘Employee details’> ROW FORMAT DELIMITED> FIELDS TERMINATED BY ‘\t’> LINES TERMINATED BY ‘\n’> STORED AS TEXTFILE;
成功创建表后,能看到以下回应:
OKTime taken: 5.905 secondshive>
JDBC 程序
以下是使用JDBC程序来创建表的一个例子
import java.sql.SQLException;import java.sql.Connection;import java.sql.ResultSet;import java.sql.Statement;import java.sql.DriverManager;public class HiveCreateTable { private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver"; public static void main(String[] args) throws SQLException { // Register driver and create driver instance Class.forName(driverName); // get connection Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", ""); // create statement Statement stmt = con.createStatement(); // execute statement stmt.executeQuery("CREATE TABLE IF NOT EXISTS " +" employee ( eid int, name String, " +" salary String, destignation String)" +" COMMENT ‘Employee details’" +" ROW FORMAT DELIMITED" +" FIELDS TERMINATED BY ‘\t’" +" LINES TERMINATED BY ‘\n’" +" STORED AS TEXTFILE;"); System.out.println(“ Table employee created.”); con.close(); }}
将该程序保存在一个名为HiveCreateTb.java文件中。下面的命令用于编译和执行这个程序。
$ javac HiveCreateDb.java$ java HiveCreateDb
输出
Table employee created.
LOAD DATA语句
加载数据到hive表中
一般来说,在SQL创建表后,我们就可以使用INSERT语句插入数据。但在Hive中,可以使用 load data 语句插入数据。
同时将数据插入到Hive,最好是使用 load data 来存储大量记录。
有两种方法用来加载数据:
一种是从本地文件系统把数据load进hive某张表中。
第二种是从Hadoop文件系统把数据加载到hive表中。
语法
加载数据的语法如下:
LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1, partcol2=val2 ...)]
- LOCAL是标识符指定本地路径。它是可选的。
- OVERWRITE 是可选的,覆盖表中的数据。
PARTITION 这是可选的
示例
我们将插入下面的数据到表中。在/home/user目录中新建名为sample.txt的文件,把下面的数据写进去。
1201 Gopal 45000 Technical manager1202 Manisha 45000 Proof reader1203 Masthanvali 40000 Technical writer1204 Kiran 40000 Hr Admin1205 Kranthi 30000 Op Admin
下面的语句就是 load 本地文本到hive表中。
hive> LOAD DATA LOCAL INPATH '/home/user/sample.txt'> OVERWRITE INTO TABLE employee;
load 成功完成,能看到以下回应:
OKTime taken: 15.905 secondshive>
JDBC 程序
下面给出的是使用Java程序将本地的数据加载到表中。
import java.sql.SQLException;import java.sql.Connection;import java.sql.ResultSet;import java.sql.Statement;import java.sql.DriverManager;public class HiveLoadData { private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver"; public static void main(String[] args) throws SQLException { // Register driver and create driver instance Class.forName(driverName); // get connection Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", ""); // create statement Statement stmt = con.createStatement(); // execute statement stmt.executeQuery("LOAD DATA LOCAL INPATH '/home/user/sample.txt'" + "OVERWRITE INTO TABLE employee;"); System.out.println("Load Data into employee successful"); con.close(); }}
将该程序保存在一个名为HiveLoadData.java的文件中。使用下面的命令来编译和执行这个程序。
$ javac HiveLoadData.java$ java HiveLoadData
输出:
Load Data into employee successful
阅读全文
0 0
- Hive中创建表(hive的使用和MySQL的使用很相似)
- 编写hive udf和使用hive udf:hue的hive界面中使用hive udf函数、oozie使用hive udf函数、hive命令行使用udf函数
- 编写hive udf和使用hive udf:hue的hive界面中使用hive udf函数、oozie使用hive udf函数、hive命令行使用udf函数
- Hive中UDF和UDAF的使用
- HIVE的安装配置、mysql的安装、hive创建表、创建分区、修改表等内容、hive beeline使用、HIVE的四种数据导入方式、使用Java代码执行hive的sql命令
- HIVE的安装配置、mysql的安装、hive创建表、创建分区、修改表等内容、hive beeline使用、HIVE的四种数据导入方式、使用Java代码执行hive的sql命令
- hive中数组的使用
- Hive中Mapjoin的使用
- hive中RegexSerDe的使用
- hive中RegexSerDe的使用
- Hive中UDF的使用
- Hive中sql的使用
- Hive中数组的使用
- 将Hive统计分析结果导入到MySQL数据库表中(二)——使用Hive和MySQL JDBC驱动
- Hive 之使用mysql作为hive的metastore
- 在Hive中创建与mysql下相同的表
- hive中select中DISTINCT的技巧和使用
- Hadoop中使用Hive和Hbase的关系和区别
- IP地址 子网掩码 网络号 主机号 网络地址 主机地址
- js实现手机横竖屏事件
- Call From ubuntu/127.0.1.1 to localhost:8020 failed on connection exception
- swift项目导入 oc的framework出现 xxx file not found
- java的char类型可以储存汉字吗
- Hive中创建表(hive的使用和MySQL的使用很相似)
- Quartz使用总结
- 多维数组和广义表
- 基础练习 数列排序
- hdu 2177 取(2堆)石子游戏(威佐夫博弈)
- 机器学习基石-03-1-learning with different Output Space
- 技术人员的危机感
- Android VideoView播放视频竖屏切换横屏有黑白边无法全屏
- vs中debug版本何release的区别