Увеличение потоков на сервере Undertow

Я работаю с Undertow, и моя цель — получить максимальную пропускную способность, используя экземпляры aws.

Проблема, с которой я столкнулся, заключается в следующем:

Когда я использую один экземпляр с потоками = 1000, я получаю в целом 9900. Когда я использую два экземпляра с потоками = 1000 (каждый), я получаю пропускную способность 9800.

Один из способов, которым я думал, - это увеличить количество потоков при создании сервера.

Это ошибка, которую я получаю:

        java.lang.reflect.InvocationTargetException
            at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
            at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
            at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
            at java.lang.reflect.Method.invoke(Method.java:606)
            at org.codehaus.mojo.exec.ExecJavaMojo$1.run(ExecJavaMojo.java:293)
            at java.lang.Thread.run(Thread.java:745)
        Caused by: java.lang.RuntimeException: java.io.IOException: Too many open files
            at io.undertow.Undertow.start(Undertow.java:141)
            at testProject.testArtifact.ServerConnection.createServer(ServerConnection.java:63)
            at testProject.testArtifact.App.main(App.java:20)
            ... 6 more
        Caused by: java.io.IOException: Too many open files
            at sun.nio.ch.IOUtil.makePipe(Native Method)
            at sun.nio.ch.EPollSelectorImpl.<init>(EPollSelectorImpl.java:65)
            at sun.nio.ch.EPollSelectorProvider.openSelector(EPollSelectorProvider.java:36)
            at org.xnio.nio.NioXnio$DefaultSelectorCreator.open(NioXnio.java:245)
            at org.xnio.nio.NioXnioWorker.<init>(NioXnioWorker.java:93)
            at org.xnio.nio.NioXnio.createWorker(NioXnio.java:203)
            at org.xnio.Xnio.createWorker(Xnio.java:437)
            at org.xnio.Xnio.createWorker(Xnio.java:424)
            at io.undertow.Undertow.start(Undertow.java:84)
            ... 8 more
        [INFO] ------------------------------------------------------------------------
        [INFO] BUILD FAILURE
        [INFO] ------------------------------------------------------------------------
        [INFO] Total time: 1.938 s
        [INFO] Finished at: 2014-10-24T17:31:59+00:00
        [INFO] Final Memory: 9M/142M
        [INFO] ------------------------------------------------------------------------
        [ERROR] Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.3.2:java (default-cli) on project testArtifact: An exception occured while executing the Java class. null: InvocationTargetException: java.io.IOException: Too many open files -> [Help 1]
        org.apache.maven.lifecycle.LifecycleExecutionException: Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.3.2:java (default-cli) on project testArtifact: An exception occured while executing the Java class. null
            at org.apache.maven.lifecycle.internal.MojoExecutor.execute(MojoExecutor.java:216)
            at org.apache.maven.lifecycle.internal.MojoExecutor.execute(MojoExecutor.java:153)
            at org.apache.maven.lifecycle.internal.MojoExecutor.execute(MojoExecutor.java:145)
            at org.apache.maven.lifecycle.internal.LifecycleModuleBuilder.buildProject(LifecycleModuleBuilder.java:116)
            at org.apache.maven.lifecycle.internal.LifecycleModuleBuilder.buildProject(LifecycleModuleBuilder.java:80)
            at org.apache.maven.lifecycle.internal.builder.singlethreaded.SingleThreadedBuilder.build(SingleThreadedBuilder.java:51)
            at org.apache.maven.lifecycle.internal.LifecycleStarter.execute(LifecycleStarter.java:120)
            at org.apache.maven.DefaultMaven.doExecute(DefaultMaven.java:347)
            at org.apache.maven.DefaultMaven.execute(DefaultMaven.java:154)
            at org.apache.maven.cli.MavenCli.execute(MavenCli.java:582)
            at org.apache.maven.cli.MavenCli.doMain(MavenCli.java:214)
            at org.apache.maven.cli.MavenCli.main(MavenCli.java:158)
            at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
            at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
            at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
            at java.lang.reflect.Method.invoke(Method.java:606)
            at org.codehaus.plexus.classworlds.launcher.Launcher.launchEnhanced(Launcher.java:289)
            at org.codehaus.plexus.classworlds.launcher.Launcher.launch(Launcher.java:229)
            at org.codehaus.plexus.classworlds.launcher.Launcher.mainWithExitCode(Launcher.java:415)
            at org.codehaus.plexus.classworlds.launcher.Launcher.main(Launcher.java:356)
        Caused by: org.apache.maven.plugin.MojoExecutionException: An exception occured while executing the Java class. null
            at org.codehaus.mojo.exec.ExecJavaMojo.execute(ExecJavaMojo.java:345)
            at org.apache.maven.plugin.DefaultBuildPluginManager.executeMojo(DefaultBuildPluginManager.java:132)
            at org.apache.maven.lifecycle.internal.MojoExecutor.execute(MojoExecutor.java:208)
            ... 19 more
        Caused by: java.lang.reflect.InvocationTargetException
            at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
            at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
            at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
            at java.lang.reflect.Method.invoke(Method.java:606)
            at org.codehaus.mojo.exec.ExecJavaMojo$1.run(ExecJavaMojo.java:293)
            at java.lang.Thread.run(Thread.java:745)
        Caused by: java.lang.RuntimeException: java.io.IOException: Too many open files
            at io.undertow.Undertow.start(Undertow.java:141)
            at testProject.testArtifact.ServerConnection.createServer(ServerConnection.java:63)
            at testProject.testArtifact.App.main(App.java:20)
            ... 6 more
        Caused by: java.io.IOException: Too many open files
            at sun.nio.ch.IOUtil.makePipe(Native Method)
            at sun.nio.ch.EPollSelectorImpl.<init>(EPollSelectorImpl.java:65)
            at sun.nio.ch.EPollSelectorProvider.openSelector(EPollSelectorProvider.java:36)
            at org.xnio.nio.NioXnio$DefaultSelectorCreator.open(NioXnio.java:245)
            at org.xnio.nio.NioXnioWorker.<init>(NioXnioWorker.java:93)
            at org.xnio.nio.NioXnio.createWorker(NioXnio.java:203)
            at org.xnio.Xnio.createWorker(Xnio.java:437)
            at org.xnio.Xnio.createWorker(Xnio.java:424)
            at io.undertow.Undertow.start(Undertow.java:84)
            ... 8 more
        [ERROR]
        [ERROR] Re-run Maven using the -X switch to enable full debug logging.
        [ERROR]
        [ERROR] For more information about the errors and possible solutions, please read the following articles:
        [ERROR] [Help 1] http://cwiki.apache.org/confluence/display/MAVEN/MojoExecutionException

Как увеличить пропускную способность в моем случае.

Я не могу решить проблему, когда пытаюсь использовать потоки > 1000

Любая помощь будет очень полезна.

Спасибо.


person nirvanastack    schedule 24.10.2014    source источник


Ответы (1)


Вам необходимо увеличить количество открытых файлов в вашей операционной системе. В Linux это обычно настраивается в файле limit.conf/limits.d.

person user4237932    schedule 11.11.2014
comment
..или набрав ulimit -n # для открытых файлов или ulimit -u # для количества процессов. Но эти настройки не сохраняются после перезапуска, так что вышеприведенное лучше, но вы можете настроить значения таким образом. - person Jiri Kremser; 11.11.2014