Hive通过JDBC方式访问时碰到的问题汇总

来源:互联网 发布:淘宝运营多少人 编辑:程序博客网 时间:2024/05/22 04:27

1、执行hive sql时服务器报Connection refused错误

解决方法:Hive没有启动hive server2,可以通过如下指令启动,指令的后半段是指定日志存放地址

hive --service hiveserver2 2>&1 >> /home/user/hive/log.log 2>&1 &

2、执行hive sql时报 xxxx is not allowed to impersonate xxxx

解决方法:这是账户配置问题,需修改hadoop的配置文件core-site.xml,UserName是在hadoop的账户名,记得修改后要重启hadoop

<property>      <name>hadoop.proxyuser.UserName.hosts</name>      <value>*</value></property><property>      <name>hadoop.proxyuser.UserName.groups</name>      <value>UserName</value></property>

3、执行hive sql时报 org.apache.hadoop.hbase.exceptions.ConnectionClosingException: Connection to xxxx/xx.xx.xx.xx:xxxx is closing,但同样的指令在hive shell里执行却没问题

解决方法:修改hive的配置文件hive-site,将hive.exec.submitviachild设置为true

<property>    <name>hive.exec.submitviachild</name>    <value>true</value></property>
ps:这个问题相对比较难理解,这个问题仅发生在调用的资源跟hbase有关系的时候(外部表),如果仅仅是hive自身相关的表还不会有这个异常,而且这个错误出现时对应的异常信息是socketTimeout,按这个异常去查hbase.rpc.timeout,hbase.client.operation.timeout,hbase.client.scanner.timeout.period都是徒劳的,顺带贴个hive配置说明

原创粉丝点击