hive与json:使用HDFS上的json格式数据建立hive表
来源:互联网 发布:mysql修改字符集utf8 编辑:程序博客网 时间:2024/06/05 01:11
1 下载对应版本的 jar包
http://mvnrepository.com/artifact/org.apache.hive.hcatalog/hive-hcatalog-core
add jar /home/xxx/hive-hcatalog-core-2.1.0.jar
2.创建表
CREATE TABLE json_table(id bigint, sourceType int)ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe'STORED AS TEXTFILE;
3.加载数据
load data local inpath '/home/xxx/json.txt' into table json_table;
文件如下
{"id":5644228109524316032,"sourceType":1}{"id":-736866360508848202,"sourceType":3}
4.
select * from json_table;OK5644228109524316032 1-736866360508848202 3
参考
https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-RowFormats&SerDe
注:本人是用的Hive的2.1.0版本
0 0
- hive与json:使用HDFS上的json格式数据建立hive表
- 使用hive来分析json格式数据
- hive存储读取json格式的数据
- HIVE json格式数据的处理
- Hive处理json格式数据
- json格式的数据导入到hive表中
- 如何在Hive中使用Json格式数据
- 使用shell将hdfs上的数据导入到hive表中
- [Hive]使用HDFS目录数据创建Hive表分区
- 基于第三方Json数据的hive映射表
- 查看HDFS上存储的hive表
- Hive中处理json数据
- Hive 使用解析Json 文件格式
- Hive-JSON 原始数据映射 Hive 表结构
- 使用在hdfs上的文件导入到hive中
- hive中自定义JsonSerde处理复杂结构的json数据
- JSON数据 与 JSON数据的使用
- hive json数据生成和处理
- 算法 后缀数组
- Oracle SQL Developer连接报错(ORA-12505)的解决方案(两种)
- C# 计算变量大小
- ubuntu下编译FFmpeg
- NET Core 介绍
- hive与json:使用HDFS上的json格式数据建立hive表
- Android程序Crash时如何获取异常信息
- 运行时异常与一般异常的区别
- Spring Boot (十四)集成Dubbo
- A + B Problem
- linux复制日志的最后2000行出来
- python中字符串:声明、编码、函数、格式化
- Java字符串
- ssh开发实现积分商城层1.3