带有HBase Scan的java.lang.NoClassDefFoundError

Question

我正在尝试运行MapReduce作业来扫描HBase表.目前我使用的是Cloudera 4.4附带的HBase版本0.94.6.在我的程序中的某个时刻,我使用Scan(),我正确地导入它:

import org.apache.hadoop.hbase.client.Scan;

它编译得很好,我也可以创建一个jar文件.我通过传递hbase classpath-cp选项的值来实现.运行程序时,我收到以下消息:

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/client/Scan

我运行代码使用:

hadoop jar my_program.jar MyJobClass -libjars <list_of_jars>

其中list_of_jars包含/opt/cloudera/parcels/CDH/lib/hbase/hbase.jar.为了仔细检查,我确认hbase.jar包含Scan.我这样做:

jar tf /opt/cloudera/parcels/CDH/lib/hbase/hbase.jar

我可以看到这条线:

org/apache/hadoop/hbase/client/Scan.class

在输出中.一切看起来都不错.我不明白为什么说Scan没有定义.我传递了正确的jar,它包含了类.

任何帮助表示赞赏.

Answer 1

设置HADOOP_CLASSPATH变量修复了问题:

export HADOOP_CLASSPATH=`/usr/bin/hbase classpath`