Hive中创建表(hive的使用和MySQL的使用很相似)

来源:互联网 发布:nginx记录ip 编辑:程序博客网 时间:2024/05/24 04:40

CREATE TABLE语句

(不区分大小写)

Create Table是用于在Hive中创建表的语句,语法和示例如下:

语法:

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][ROW FORMAT row_format][STORED AS file_format]

示例:
假设需要使用CREATE TABLE语句创建一个名为employee表,下表列出了employee表中的字段和数据类型:

这里写图片描述

创建表的语句如下:

hive> CREATE TABLE IF NOT EXISTS employee ( eid int, name String,> salary String, destination String)> COMMENT ‘Employee details’> ROW FORMAT DELIMITED> FIELDS TERMINATED BY ‘\t’> LINES TERMINATED BY ‘\n’> STORED AS TEXTFILE;

成功创建表后,能看到以下回应:

OKTime taken: 5.905 secondshive>

JDBC 程序


以下是使用JDBC程序来创建表的一个例子

import java.sql.SQLException;import java.sql.Connection;import java.sql.ResultSet;import java.sql.Statement;import java.sql.DriverManager;public class HiveCreateTable {   private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";   public static void main(String[] args) throws SQLException {      // Register driver and create driver instance      Class.forName(driverName);      // get connection      Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", "");      // create statement      Statement stmt = con.createStatement();      // execute statement      stmt.executeQuery("CREATE TABLE IF NOT EXISTS "         +" employee ( eid int, name String, "         +" salary String, destignation String)"         +" COMMENT ‘Employee details’"         +" ROW FORMAT DELIMITED"         +" FIELDS TERMINATED BY ‘\t’"         +" LINES TERMINATED BY ‘\n’"         +" STORED AS TEXTFILE;");      System.out.println(“ Table employee created.”);      con.close();   }}

将该程序保存在一个名为HiveCreateTb.java文件中。下面的命令用于编译和执行这个程序。

$ javac HiveCreateDb.java$ java HiveCreateDb

输出

Table employee created.

LOAD DATA语句


加载数据到hive表中

一般来说,在SQL创建表后,我们就可以使用INSERT语句插入数据。但在Hive中,可以使用 load data 语句插入数据。

同时将数据插入到Hive,最好是使用 load data 来存储大量记录。
有两种方法用来加载数据:
一种是从本地文件系统把数据load进hive某张表中。
第二种是从Hadoop文件系统把数据加载到hive表中。

语法
加载数据的语法如下:

LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1, partcol2=val2 ...)]
  • LOCAL是标识符指定本地路径。它是可选的。
  • OVERWRITE 是可选的,覆盖表中的数据。
  • PARTITION 这是可选的

    示例
    我们将插入下面的数据到表中。在/home/user目录中新建名为sample.txt的文件,把下面的数据写进去。

1201  Gopal       45000    Technical manager1202  Manisha     45000    Proof reader1203  Masthanvali 40000    Technical writer1204  Kiran       40000    Hr Admin1205  Kranthi     30000    Op Admin

下面的语句就是 load 本地文本到hive表中。

hive> LOAD DATA LOCAL INPATH '/home/user/sample.txt'> OVERWRITE INTO TABLE employee;

load 成功完成,能看到以下回应:

OKTime taken: 15.905 secondshive>

JDBC 程序


下面给出的是使用Java程序将本地的数据加载到表中。

import java.sql.SQLException;import java.sql.Connection;import java.sql.ResultSet;import java.sql.Statement;import java.sql.DriverManager;public class HiveLoadData {   private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";   public static void main(String[] args) throws SQLException {      // Register driver and create driver instance      Class.forName(driverName);      // get connection      Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", "");      // create statement      Statement stmt = con.createStatement();      // execute statement      stmt.executeQuery("LOAD DATA LOCAL INPATH '/home/user/sample.txt'" + "OVERWRITE INTO TABLE employee;");      System.out.println("Load Data into employee successful");      con.close();   }}

将该程序保存在一个名为HiveLoadData.java的文件中。使用下面的命令来编译和执行这个程序。

$ javac HiveLoadData.java$ java HiveLoadData

输出:

Load Data into employee successful
阅读全文
0 0
原创粉丝点击