当hive和hbase整合以后,执行hql,提示找不到类。

当hive和hbase整合以后,执行hive ql 启动运行task时,提示java.lang.ClassNotFoundException,首先考虑下面这种状况:html

在hive-site.xml中的hive.aux.jars.path属性配置是否完整,首先最少的有zookeeper,hbase,hive-hbase-handler这三个包。java

而后查找提示不存在的class,看看不存在的class在哪一个包,而后配置进去。例若有一次提示:apache

java.lang.ClassNotFoundException: org.antlr.runtime.CommonTokenapp

经查找这个类是在antlr-runtime-3.4.jar包里面,因此把antlr-runtime-3.4.jar包也配进hive.aux.jars.path中,以下:oop

<property>
 <name>hive.aux.jars.path</name>
 <value>file:///home/cdh/apps/hive-0.10.0-cdh4.7.0/lib/hive-hbase-handler-0.10.0-cdh4.7.0.jar,file:///home/cdh/apps/hive-0.10.0-cdh4.7.0/lib/hbase-0.94.15-cdh4.7.0.jar,file:///home/cdh/apps/hive-0.10.0-cdh4.7.0/lib/zookeeper-3.4.5-cdh4.7.0.jar,file:///home/cdh/apps/hive-0.10.0-cdh4.7.0/lib/antlr-runtime-3.4.jar</value>
</property>

最后发现不报错了。因此相似的NotFoundException均可以使用这种方法试试。我还看到有人把guava-11.0.2.jar配置进去的,足以见得,hive.aux.jars.path属性不是固定的,缺什么就配置什么。还有就是hive.aux.jars.path只能一个一个文件加进去,不能配置文件夹或者*.jar(通过试验不能)。spa

找不到org.apache.hadoop.hbase.CompatibilityFactoryxml

这是由于缺乏hbase-hadoop2-compat这个包,可是当我引入这个包以后,仍是出错,你还须要加上hbase-hadoop-compathtm

不知道为何,这2个包都须要加上才有用。而cdh的这个包没有标明是2仍是1,不知道那个版本,因此2个版本的包都复制到了lib下。最后不报错。blog

参考:Hive-0.13.1安装配置
hadoop

相关文章
相关标签/搜索