Не удается подключиться к HBase из WildFly

Я столкнулся со странной проблемой при попытке подключиться к базе данных HBase 0.98.5-hadoop2 из EJB, развернутого на WildFly 8.1.0.Final.

Этот код отлично работает как отдельное приложение:

public static void main(String[] args) throws IOException {
   Configuration config = getConfiguration();
   HConnection connection = HConnectionManager.createConnection(config);
} 
private static Configuration getConfiguration() {
   Configuration config = HBaseConfiguration.create();
   config.set("hbase.zookeeper.quorum", "hbase");  // 
   config.set("hbase.client.retries.number", "3");  // 
   config.set("hbase.cluster.distributed", "true");
   return config;
}

но когда я включаю его в EJB и запускаю с сервера, у меня есть следующее исключение:

То же самое происходит на машинах Linux, за исключением того, что UnixLoginModule не может найти.

Фактическое исключение происходит в этой строке из org.apache.hadoop.hbase.security.User

Далее следует очень простой код EJB, иллюстрирующий тему. Он не работает независимо от того, существует сервер HBase или нет.

private SecureHadoopUser() throws IOException {
   ugi = UserGroupInformation.getCurrentUser();
}

Я настроил клиент HBase как модуль, вот содержимое module.xml

package hbasetest;
import java.io.IOException;
import javax.ejb.Stateless;
import org.apache.hadoop.security.UserGroupInformation;
@Stateless
public class HbaseExecutorImpl implements HbaseExecutor {
    public void test() {
        try {
            UserGroupInformation ugi = UserGroupInformation.getCurrentUser();
        } catch (IOException ex) {
            throw new RuntimeException(ex);
        }
    }
}

jboss-deployment-structure.xml выглядит так:

<?xml version="1.0" encoding="UTF-8"?>
<module xmlns="urn:jboss:module:1.3" name="com.something.hbaseclient">
    <resources>
        <resource-root path="activation-1.1.jar"/>
        <resource-root path="aopalliance-1.0.jar"/>
        <resource-root path="asm-3.1.jar"/>
        <resource-root path="avro-1.7.7.jar"/>
        <resource-root path="commons-beanutils-1.7.0.jar"/>
        <resource-root path="commons-beanutils-core-1.8.0.jar"/>
        <resource-root path="commons-cli-1.2.jar"/>
        <resource-root path="commons-codec-1.7.jar"/>
        <resource-root path="commons-collections-3.2.1.jar"/>
        <resource-root path="commons-compress-1.4.1.jar"/>
        <resource-root path="commons-configuration-1.6.jar"/>
        <resource-root path="commons-digester-1.8.jar"/>
        <resource-root path="commons-httpclient-3.1.jar"/>
        <resource-root path="commons-io-2.4.jar"/>
        <resource-root path="commons-lang-2.6.jar"/>
        <resource-root path="commons-logging-1.1.1.jar"/>
        <resource-root path="commons-math-2.1.jar"/>
        <resource-root path="commons-net-3.1.jar"/>
        <resource-root path="findbugs-annotations-1.3.9-1.jar"/>
        <resource-root path="guava-12.0.1.jar"/>
        <resource-root path="guice-3.0.jar"/>
        <resource-root path="guice-servlet-3.0.jar"/>
        <resource-root path="hadoop-auth-2.2.0.jar"/>
        <resource-root path="hadoop-common-2.2.0.jar"/>
        <resource-root path="hadoop-mapreduce-client-core-2.2.0.jar"/>
        <resource-root path="hadoop-yarn-api-2.2.0.jar"/>
        <resource-root path="hadoop-yarn-common-2.2.0.jar"/>
        <resource-root path="hbase-client-0.98.5-hadoop2.jar"/>
        <resource-root path="hbase-common-0.98.5-hadoop2.jar"/>
        <resource-root path="hbase-protocol-0.98.5-hadoop2.jar"/>
        <resource-root path="htrace-core-2.04.jar"/>
        <resource-root path="jackson-core-asl-1.8.8.jar"/>
        <resource-root path="jackson-jaxrs-1.8.8.jar"/>
        <resource-root path="jackson-mapper-asl-1.8.8.jar"/>
        <resource-root path="jackson-xc-1.8.8.jar"/>
        <resource-root path="javax.inject-1.jar"/>
        <resource-root path="jaxb-api-2.2.2.jar"/>
        <resource-root path="jaxb-impl-2.2.3-1.jar"/>
        <resource-root path="jboss-ejb-api_3.2_spec-1.0.0.Final.jar"/>
        <resource-root path="jersey-core-1.8.jar"/>
        <resource-root path="jersey-guice-1.9.jar"/>
        <resource-root path="jersey-json-1.8.jar"/>
        <resource-root path="jersey-server-1.8.jar"/>
        <resource-root path="jets3t-0.6.1.jar"/>
        <resource-root path="jettison-1.3.1.jar"/>
        <resource-root path="jetty-6.1.26.jar"/>
        <resource-root path="jetty-util-6.1.26.jar"/>
        <resource-root path="jsch-0.1.42.jar"/>
        <resource-root path="jsr305-1.3.9.jar"/>
        <resource-root path="log4j-1.2.17.jar"/>
        <resource-root path="netty-3.6.6.Final.jar"/>
        <resource-root path="paranamer-2.3.jar"/>
        <resource-root path="protobuf-java-2.5.0.jar"/>
        <resource-root path="slf4j-api-1.6.4.jar"/>
        <resource-root path="slf4j-log4j12-1.6.4.jar"/>
        <resource-root path="snappy-java-1.0.4.1.jar"/>
        <resource-root path="xmlenc-0.52.jar"/>
        <resource-root path="xz-1.0.jar"/>
        <resource-root path="zookeeper-3.4.6.jar"/>
    </resources>
    <dependencies>
        <module name="javaee.api"/>
    </dependencies>
</module>

Я хотел бы знать, что происходит. Кажется, что код, находящийся в WildFly, имеет неправильный контекст безопасности, и, следовательно, некоторые настройки WildFly должны быть полезны, но я действительно понятия не имею, что делать сейчас.

<jboss-deployment-structure>
    <deployment>
        <dependencies>
            <module name="com.something.hbaseclient"/>
        </dependencies>
    </deployment>
</jboss-deployment-structure>

На всякий случай, если кому-то интересно, я исправил эту проблему, добавив это


person user1455836    schedule 09.10.2014    source источник


Ответы (1)


в раздел module.xml

<system export="true">
   <paths>
      <path name="com/sun/security/auth/module"/>
   </paths>
</system>

Его нужно добавить в module.xml, а не в jboss-deployment-structure.xml из-за того, как WildFly загружает классы.

2014-10-09 11:58:57,737 ОШИБКА [org.jboss.as.ejb3.invocation] (EJB по умолчанию — 2) JBAS014134: сбой вызова EJB в компоненте HbaseExecutorImpl для метода public abstract void hbasetest.HbaseExecutor.testConnect(): javax .ejb.EJBException: java.lang.RuntimeException: java.io.IOException: сбой при входе в org.jboss.as.ejb3.tx.CMTTxInterceptor.handleExceptionInOurTx(CMTTxInterceptor.java:190) [wildfly-ejb3-8.1.0. Final.jar:8.1.0.Final] на org.jboss.as.ejb3.tx.CMTTxInterceptor.invokeInOurTx(CMTTxInterceptor.java:275) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.as.ejb3.tx.CMTTxInterceptor.required(CMTTxInterceptor.java:340) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.as.ejb3.tx .CMTTxInterceptor.processInvocation(CMTTxInterceptor.java:239) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org. jboss.as.ejb3.remote.EJBRemoteTransactionPropagating Interceptor.processInvocation(EJBRemoteTransactionPropagatingInterceptor.java:79) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss .as.ejb3.component.interceptors.CurrentInvocationContextInterceptor.processInvocation(CurrentInvocationContextInterceptor.java:41) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext .java:309) по адресу org.jboss.as.ejb3.component.invocationmetrics.WaitTimeInterceptor.processInvocation(WaitTimeInterceptor.java:43) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] по адресу org. jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ejb3.security.SecurityContextInterceptor.processInvocation(SecurityContextInterceptor.java:95) [wildfly-ejb3-8.1.0.Final.jar:8.1. 0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в o rg.jboss.as.ejb3.component.interceptors.ShutDownInterceptorFactory$1.processInvocation(ShutDownInterceptorFactory.java:64) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext .proceed(InterceptorContext.java:309) в org.jboss.as.ejb3.component.interceptors.LoggingInterceptor.processInvocation(LoggingInterceptor.java:59) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final ] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ee.component. NamespaceContextInterceptor.processInvocation(NamespaceContextInterceptor.java:50) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ejb3.component.interceptors.AdditionalSetupInterceptor.processInvocation(AdditionalSetupInterceptor.java:55) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.ContextClassLoaderInterceptor.processInvocation(ContextClassLoaderInterceptor.java :64) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.InterceptorContext.run(InterceptorContext.java:326) в org.wildfly.security.manager.WildFlySecurityManager.doChecked( WildFlySecurityManager.java:448) в org.jboss.invocation.AccessCheckingInterceptor.processInvocation(AccessCheckingInterceptor.java:61) в org.jboss.invocation.InterceptorContext.proceed(InterceptorCont ext.java:309) в org.jboss.invocation.InterceptorContext.run(InterceptorContext.java:326) в org.jboss.invocation.PrivilegedWithCombinerInterceptor.processInvocation(PrivilegedWithCombinerInterceptor.java:80) в org.jboss.invocation.InterceptorContext.proceed (InterceptorContext.java:309) в org.jboss.invocation.ChainedInterceptor.processInvocation(ChainedInterceptor.java:61) в org.jboss.as.ee.component.ViewService$View.invoke(ViewService.java:185) в org. jboss.as.ejb3.remote.protocol.versionone.MethodInvocationMessageHandler.invokeMethod(MethodInvocationMessageHandler.java:330) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] на org.jboss.as.ejb3. remote.protocol.versionone.MethodInvocationMessageHandler.access$100(MethodInvocationMessageHandler.java:70) [wildfly-ejb3-8.1.0.Final.jar:8.1.0.Final] в org.jboss.as.ejb3.remote.protocol.versionone .MethodInvocationMessageHandler$1.run(MethodInvocationMessageHandler.java:203) [wildfly-ejb3-8.1.0. Final.jar:8.1.0.Final] в java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:471) [rt.jar:1.7.0_67] в java.util.concurrent.FutureTask.run(FutureTask .java:262) [rt.jar:1.7.0_67] в java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145) [rt.jar:1.7.0_67] в java.util.concurrent.ThreadPoolExecutor$Worker .run(ThreadPoolExecutor.java:615) [rt.jar:1.7.0_67] в java.lang.Thread.run(Thread.java:745) [rt.jar:1. 7.0_67] в org.jboss.threads.JBossThread.run(JBossThread.java:122) Вызвано: java.lang.RuntimeException: java.io.IOException: сбой входа в систему в hbasetest.HbaseExecutorImpl.testConnect(HbaseExecutorImpl.java:21 ) [db2test-1.0-SNAPSHOT.jar:] at sun.reflect.NativeMethodAccessorImpl.invoke0(собственный метод) [rt.jar:1.7.0_67] at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) [rt. jar:1.7.0_67] в sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) [rt.jar:1.7.0_67] в java.lang.reflect.Method.invoke(Method.java:606) [rt. jar:1.7.0_67] в org.jboss.as.ee.component.ManagedReferenceMethodInterceptor.processInvocation(ManagedReferenceMethodInterceptor.java:52) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation .WeavedInterceptor.processInvocation(WeavedInterceptor.java:53) на org.jboss.as.ee.component.interceptors. UserInterceptorFactory$1.processInvocation(UserInterceptorFactory.java:63) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.InterceptorContext$Invocation.proceed(InterceptorContext.java:407) в org. jboss.as.weld.ejb.Jsr299BindingsInterceptor.doMethodInterception(Jsr299BindingsInterceptor.java:82) [wildfly-weld-8.1.0.Final.jar:8.1.0.Final] в org.jboss.as.weld.ejb.Jsr299BindingsInterceptor. processInvocation(Jsr299BindingsInterceptor.java:93) [wildfly-weld-8.1.0.Final.jar:8.1.0.Final] в org.jboss.as.ee.component.interceptors.UserInterceptorFactory$1.processInvocation(UserInterceptorFactory.java:63 ) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.WeavedInterceptor.processInvocation(WeavedInterceptor.java:53) в org.jboss.as.ee.component.interceptors.UserInterceptorFactory$1 .processInvocation(UserInterceptorFactory.java:63) в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) по адресу org.jboss.as.ejb3.component.invocationmetrics.ExecutionTimeInterceptor.processInvocation(ExecutionTimeInterceptor.java:43) [wildfly-ejb3-8.1.0.Final. jar:8.1.0.Final] на org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) на org.jboss.as.jpa.interceptor.SBInvocationInterceptor.processInvocation(SBInvocationInterceptor.java:47) на org.jboss .вызов. InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.InterceptorContext$Invocation.proceed(InterceptorContext.java:407) в org.jboss.weld.ejb.AbstractEJBRequestScopeActivationInterceptor.aroundInvoke(AbstractEJBRequestScopeActivationInterceptor.java:55) [weld -core-impl-2.1.2.Final.jar:2014-01-09 09:23] на org.jboss.as.weld.ejb.EjbRequestScopeActivationInterceptor.processInvocation(EjbRequestScopeActivationInterceptor.java:83) [wildfly-weld-8.1. 0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ee.concurrent.ConcurrentContextInterceptor.processInvocation(ConcurrentContextInterceptor.java:45) [wildfly-ee-8.1.0.Final.jar:8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.invocation.InitialInterceptor.processInvocation(InitialInterceptor.java :21) на org.jboss.invocation.InterceptorContext.pr oceed(InterceptorContext.java:309) в org.jboss.invocation.ChainedInterceptor.processInvocation(ChainedInterceptor.java:61) в org.jboss.as.ee.component.interceptors.ComponentDispatcherInterceptor.processInvocation(ComponentDispatcherInterceptor.java:53) в org .jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ejb3.component.interceptors.NonPooledEJBComponentInstanceAssociatingInterceptor.processInvocation(NonPooledEJBComponentInstanceAssociatingInterceptor.java:59) [wildfly-ejb3-8.1.0.Final.jar :8.1.0.Final] в org.jboss.invocation.InterceptorContext.proceed(InterceptorContext.java:309) в org.jboss.as.ejb3.tx.CMTTxInterceptor.invokeInOurTx(CMTTxInterceptor.java:273) [wildfly-ejb3- 8.1.0.Final.jar:8.1.0.Final] ... еще 39 Причина: java.io.IOException: сбой при входе в org.apache.hadoop.security.UserGroupInformation.getLoginUser(UserGroupInformation.java:700) [hadoop-common-2.2.0.jar:] в org.apache.hadoop.security.UserGroupInformation.getCurrentUser(UserGroupInformation.java:571) [hadoop-common-2.2.0.jar:] в hbasetest.HbaseExecutorImpl.testConnect(HbaseExecutorImpl.java:19) [db2test-1.0-SNAPSHOT. jar:] ... еще 74 Причина: javax.security.auth.login.LoginException: невозможно найти класс LoginModule: com.sun.security.auth.module.NTLoginModule from [Module "com.something.hbaseclient:main" из локального загрузчика модулей @64f40c1f (искатель: локальный искатель модулей @5247fb00 (корни: C:\opt\dtv\wildfly-8. 1.0.Final\modules,C:\opt\dtv\wildfly-8.1.0.Final\modules\system\layers\base))] в javax.security.auth.login.LoginContext.invoke(LoginContext.java:800) [rt.jar:1.7.0_67] в javax.security.auth.login.LoginContext.access$000(LoginContext.java:203) [rt.jar:1.7.0_67] в javax.security.auth.login.LoginContext$4. run(LoginContext.java:690) [rt.jar:1.7.0_67] в javax.security.auth.login.LoginContext$4.run(LoginContext.java:688) [rt.jar:1.7.0_67] в java.security .AccessController.doPrivileged(собственный метод) [rt.jar:1.7.0_67] в javax.security.auth.login.LoginContext.invokePriv(LoginContext.java:687) [rt.jar:1.7.0_67] в javax.security. auth.login.LoginContext.login(LoginContext.java:595) [rt.jar:1.7.0_67] в org.apache.hadoop.security.UserGroupInformation.getLoginUser(UserGroupInformation.java:675) [hadoop-common-2.2.0 .jar:] ... еще 76

person user1455836    schedule 21.10.2014