Hbase Java API 连接错误

Question

我正在尝试从 java 应用程序连接到 Hbase，如下所示：

Configuration config = HBaseConfiguration.create();
    config.set("hbase.zookeeper.quorum", "localhost");
    config.set("hbase.zookeeper.property.clientPort", "2181");
    config.set("zookeeper.znode.parent", "/hbase-unsecure");

    config.set("hbase.client.retries.number", Integer.toString(0));
    config.set("zookeeper.session.timeout", Integer.toString(60000));
    config.set("zookeeper.recovery.retry", Integer.toString(0));

    Connection conn = ConnectionFactory.createConnection(config);
    TableName TABLE_NAME = TableName.valueOf("weblog");
    Table table = conn.getTable(TABLE_NAME);
    Result r = table.get(new Get(Bytes.toBytes("row1")));
    System.out.println(r);

我将应用程序构建到 JAR 中，但是当运行它在集群上时：

hadoop jar hbaseConnect-0.0.1-SNAPSHOT.jar com.packagename.hbaseConnect.HbaseConnect

我收到以下错误：

    Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration
    at com.DigiMerket.hbaseConnect.HbaseConnect.main(HbaseConnect.java:23)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:497)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hbase.HBaseConfiguration
    at java.net.URLClassLoader.findClass(URLClassLoader.java:381)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
    ... 7 more

我尝试像这样在 hadoop-env 中将 HBASE_CLASSPATH 添加到 HADOOP_CLASSPATH post 建议，但我得到了同样的错误..

Answer 1

问题通过设置 "HADOOP_CLASSPATH" 如下，然后在同一个终端运行 hadoop/hbase jar:

 export HADOOP_CLASSPATH="$HADOOP_CLASSPATH:/usr/hdp/2.3.4.0-3485/hbase/lib/hbase-client.jar:/usr/hdp/2.3.4.0-3485/hbase/lib/hbase-common.jar:/usr/hdp/2.3.4.0-3485/hbase/lib/hbase-protocol-1.1.2.2.3.4.0-3485.jar:.:"

运行罐子

hadoop  jar  hbaseConnect-0.0.1-SNAPSHOT.jar com.packagename.hbaseConnect.HbaseConnect

Answer 2

日志提示你运行jar需要依赖其他jar。像 hbase-client.jar

mkdir like libs 并将你依赖的 jar 放到 libs 的目录中并使用这个命令： java -Djava.ext.dirs=/xxx/xxx/xxx/lib -jar /xxx/xxx/you 的 jar

希望能帮到你

Hbase Java API 连接错误

Hbase Java API connection error

java

hadoop

hbase

hortonworks-data-platform