hive与hbase的兼容性问题

来源:互联网 发布:如何搞垮一个淘宝店铺 编辑:程序博客网 时间:2024/05/16 07:21

Hive命令行查询表时的错误信息:(hbase-0.98.X)(hive-0.12.0)
Failed with exception java.io.IOException:java.lang.ClassCastException: org.apache.hadoop.hbase.client.Result cannot be cast to org.apache.hadoop.io.Writable

Hive日志中报错信息:
java.io.IOException: java.lang.ClassCastException: org.apache.hadoop.hbase.client.Result cannot be cast to org.apache.hadoop.io.Writable
at org.apache.hadoop.hive.ql.exec.FetchOperator.getNextRow(FetchOperator.java:551)
at org.apache.hadoop.hive.ql.exec.FetchOperator.pushRow(FetchOperator.java:489)
……
报错原因:
Hbase0.64.6        public class Result extends Object implements org.apache.hadoop.io.Writable, WritableWithSize
Hbase0.96.0        public class Result extends Object implements CellScannable
Hbase到了0.96.0之后就不再实现接口Writable了
解决方法:
暂时没有解决方法,因为hive-0.12.0和hbase-0.96.0是不兼容的,hive-hbase-handle-0.12.0.jar不兼容hbase0.96.0,hive0.12.0还停留在hadoop1.0的基础上。
hive-0.12.0和hbase0.94.X是兼容的,可是hadoop2.2.0和0.94.X又不兼容。

0 0
原创粉丝点击