hadoop学习之HIVE(3.2):hadoop2.7.2下配置hiveserver2启动远程连接
来源:互联网 发布:淘宝评价管理在哪 编辑:程序博客网 时间:2024/03/29 21:57
./hive只是启动本地客户端,往往用来测试,我们可以启动hive server2服务器用于远程连接,方便开发。
前提是配置好hadoop和hive
1,开启hive server服务:bin/hiveserver2
可查看服务是否开启:netstat -nplt | grep 10000
2,新开一个窗口,启动客户端,测试能否连接服务器:
$ bin/beelinebeeline> !connect jdbc:hive2://localhost:10000
输入用户名,hive默认用户是root,不过如果你是用其他的用户创建的hadoop和hive,就使用你的用户名,密码无,直接回车。
若出现如下信息,说明连接成功:Transaction isolation: TRANSACTION_REPEATABLE_READ
0: jdbc:hive2://localhost:10000>
3,连接成功后,就可以命令行操作,也可以像第4步一样远程连接后操作。
4,现在可以用eclipse连接hiveserver2写代码了:
a,新建java project,导入jar包:Project->Properties->Java Build Path->Libraries->Add External JARs,
分别找到并导入:hive\lib目录下的所有jar包;hadoop\share\hadoop\common\下的3个jar包;hadoop\share\hadoop\common\lib\下的以“slf4j-”开头的2个jar包。
b,新建java文件,内容如下:
package com.xxx.hive;import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.Statement;public class ConnectTest {public static void main(String[] args) throws Exception {Class.forName("org.apache.hive.jdbc.HiveDriver");Connection conn = DriverManager.getConnection("jdbc:hive2://localhost:10000/default", "你的用户名", "");try {Statement stat = conn.createStatement();ResultSet ret = stat.executeQuery("select count(*) from stu");while(ret.next()){System.out.println(ret.getInt(1));}} catch (Exception e) {// TODO Auto-generated catch blocke.printStackTrace();} finally {conn.close();}}}
这段代码连接hiveserver2执行hiveql语句,转化为mr程序执行并返回执行结果。
可能会出现错误:
(1):当执行!connect jdbc:hive2://localhost:10000时,出现错误:
Error: Failed to open new session: java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.authorize.AuthorizationException): User: jimmyhadoop is not allowed to impersonate root (state=,code=0)
解决办法:终止hadoop,修改etc/hadoop/core-site.xml,添加两项:
<property> <name>hadoop.proxyuser.username.hosts</name> <value>*</value></property><property> <name>hadoop.proxyuser.username.groups</name> <value>*</value></property>
其中的username改成你hadoop master主机的用户名,保存,重启hadoop,重新连接hive。
(2):hive2.X已经没有timeout中5000L的错误了,1.x中有的话就把L删掉。
- hadoop学习之HIVE(3.2):hadoop2.7.2下配置hiveserver2启动远程连接
- Hive学习之HiveServer2服务端配置与启动,允许远程连接
- Hive学习之HiveServer2服务端配置与启动
- Hive学习之HiveServer2服务端配置与启动
- Hive学习之HiveServer2服务端配置与启动
- Hadoop2.7.2之Hive-2.1.1的Hiveserver2服务和beeline远程调试
- hadoop学习之HIVE(3):hadoop2.7.2下安装hive2.1.0并关联mysql数据库
- hadoop学习记录(四)hadoop2.6 hive配置
- Hive学习之HiveServer2 JDBC客户端
- Hive学习之HiveServer2 JDBC客户端
- hive beeline连接hiveserver2
- Hive hiveserver2 配置运行
- Hive hiveserver2 配置运行
- [Hive]HiveServer2配置
- jdbc远程连接hiveserver2
- JDBC远程连接hiveserver2
- jdbc远程连接hiveserver2
- hadoop学习之HDFS(2.5):windows下eclipse远程连接linux下的hadoop集群并测试wordcount例子
- Cocoa深入学习:NSOperationQueue、NSRunLoop和线程安全
- 为什么Java中500==500为假而50==50为真?
- Boostrap 标准的远程弹出窗口页面样式
- 【OpenCV】OpenCV3中的SURF特征点的寻找和匹配
- if的格式
- hadoop学习之HIVE(3.2):hadoop2.7.2下配置hiveserver2启动远程连接
- 【JavaWeb】JSP学习笔记(一)环境|目录|JSP基础语法|内置对象
- LuaFramework数据传输Protobuf的解析repeated字段
- iPhone6无法开机
- 7. Reverse Integer
- sysbench压力测试工具使用方法
- centos7+maven安装
- ios逆向工程-静态分析
- Android6.0 PKMS拦截adb安装应用