hbaseMapper提交报找不到类NoClassDefFoundError

时间 2019-11-09

标签 hbasemapper 提交找不到 noclassdeffounderror 栏目 Java 繁體版

原文原文链接

最近写一个hbase的mapper生成hfile文件，可是在执行jar包时，老是报Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/client/Scan错误，注释掉这个方法以后，又报其余的jar包找不到，彷佛老是找不到hbase的相关包：html

一开始执行命令：java

root@master1 lct]# hadoop jar testhfile.jar lct01 /out
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/client/Scan
   at hbasetest.HfileCreate.main(HfileCreate.java:39)
   at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
   at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
   at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
   at java.lang.reflect.Method.invoke(Method.java:498)
   at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
   at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hbase.client.Scan
   at java.net.URLClassLoader.findClass(URLClassLoader.java:381)
   at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
   at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
   ... 7 moreapache

后来看了官网，也给出了一些介绍关于这方面：app

https://hbase.apache.org/book.html#mapreduceoop

在请教了一块儿工做的同事，肯定就是这个问题引发的，修改的执行命令：spa

[root@master1 lct]# HADOOP_CLASSPATH=`hbase classpath` hadoop jar testhfile.jar lct01 /out.net

这样执行又出现一个权限问题，这是由于root用户对hdfs目录没有读写权限，切换到hdfs用户在执行这个命令，任务就没问题了；htm

[root@master1 lct]# su hdfsblog

[hdfs@master1 lct]$ HADOOP_CLASSPATH=`hbase classpath` hadoop jar testhfile.jar lct01 /outhadoop

执行成功。