Hive 创建表
本章将解释如何创建表以及如何将数据插入其中。在HIVE中创建表的约定与使用SQL创建表的约定非常相似。
阅读更多:Hive 教程
创建表语句
创建表是用于在Hive中创建表的语句。语法和示例如下:
语法
CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.] table_name
[(col_name data_type [COMMENT col_comment], ...)]
[TABLECOMMENT table_comment]
[ROW FORMAT row_format]
[STORED AS file_format]
例
假设您需要使用 CREATE TA创建名为 **employee 的表** BLE语句。以下表列出了employee表中的字段及其数据类型:
科 | 领域名称 | 数据类型 |
---|---|---|
1 | Eid | int |
2 | 名称 | 字符串 |
3 | 薪水 | 浮动 |
4 | 称号 | 字符串 |
以下数据是评论、行格式化字段(如字段终止符、行终止符)和存储文件类型。
COMMENT ‘Employee details’
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED IN TEXT FILE
以下查询使用上述数据创建名为 employee 的表。
hive> CREATE TABLE IF NOT EXISTS employee ( eid int, name String,
salary String, destination String)
COMMENT ‘Employee details’
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED AS TEXTFILE;
如果添加了IF NOT EXISTS选项,则Hive会在表已经存在的情况下忽略该语句。
成功创建表后,您将看到以下响应:
OK
Time taken: 5.905 seconds
hive>
JDBC程序
创建表的JDBC程序示例如下。
import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;
public class HiveCreateTable {
private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
public static void main(String[] args) throws SQLException {
// 注册驱动程序并创建驱动程序实例
Class.forName(driverName);
// 获取连接
Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", "");
// 创建陈述
Statement stmt = con.createStatement();
// 执行语句
stmt.executeQuery("CREATE TABLE IF NOT EXISTS "
+" employee ( eid int, name String, "
+" salary String, destignation String)"
+" COMMENT ‘Employee details’"
+" ROW FORMAT DELIMITED"
+" FIELDS TERMINATED BY ‘\t’"
+" LINES TERMINATED BY ‘\n’"
+" STORED AS TEXTFILE;");
System.out.println("表员工已创建。");
con.close();
}
}
将程序保存在名为HiveCreateDb.java的文件中。以下命令用于编译和执行此程序。
$ javac HiveCreateDb.java
$ java HiveCreateDb
输出
Table employee created.
装载数据语句
通常,在SQL中创建表之后,我们可以使用插入语句插入数据。但是,在Hive中,我们可以使用LOAD DATA语句插入数据。
在将数据插入Hive时,最好使用LOAD DATA存储大量记录。有两种方式来加载数据:一种是从本地文件系统,另一种是从Hadoop文件系统。
语法
load data的语法如下:
LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename
[PARTITION (partcol1=val1, partcol2=val2 ...)]
- LOCAL是用于指定本地路径的标识符。它是可选的。
- OVERWRITE是可选的,用于覆盖表中的数据。
- PARTITION是可选的。
示例
将以下数据插入表中。它是一个名为 sample.txt 的文本文件, 在 /home/user 目录中。
1201 Gopal 45000 Technical manager
1202 Manisha 45000 Proof reader
1203 Masthanvali 40000 Technical writer
1204 Kiran 40000 Hr Admin
1205 Kranthi 30000 Op Admin
以下查询将给定文本加载到表中。
hive> LOAD DATA LOCAL INPATH '/home/user/sample.txt'
OVERWRITE INTO TABLE employee;
在下载成功后,您将看到以下响应:
OK
Time taken: 15.905 seconds
hive>
JDBC程序
以下是将给定数据加载到表中的JDBC程序。
import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;
public class HiveLoadData {
private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
public static void main(String[] args) throws SQLException {
// Register driver and create driver instance
Class.forName(driverName);
// get connection
Connection con = DriverManager.getConnection("jdbc:hive://localhost:10000/userdb", "", "");
// create statement
Statement stmt = con.createStatement();
// execute statement
stmt.executeQuery("LOAD DATA LOCAL INPATH '/home/user/sample.txt'" + "OVERWRITE INTO TABLE employee;");
System.out.println("Load Data into employee successful");
con.close();
}
}
将程序保存在名为 HiveLoadData.java 的文件中。使用以下命令编译和执行此程序。
$ javac HiveLoadData.java
$ java HiveLoadData
输出:
Load Data into employee successful