Apache DefaultHttpClient - java.net.BindException:地址已在使用:连接

Jam*_*mes 3 java apache-commons-httpclient

我正在访问 Tomcat 8.5 Web 服务器的 Java“客户端”中运行性能测试。大约 13,000 个请求 HTTP 请求失败并出现错误后,

org.apache.http.impl.client.DefaultHttpClient tryConnect
INFO: Retrying connect
java.net.BindException: Address already in use: connect
    at java.net.DualStackPlainSocketImpl.waitForConnect(Native Method)
    at java.net.DualStackPlainSocketImpl.socketConnect(Unknown Source)
    at java.net.AbstractPlainSocketImpl.doConnect(Unknown Source)
    at java.net.AbstractPlainSocketImpl.connectToAddress(Unknown Source)
    at java.net.AbstractPlainSocketImpl.connect(Unknown Source)
    at java.net.PlainSocketImpl.connect(Unknown Source)
    at java.net.SocksSocketImpl.connect(Unknown Source)
    at java.net.Socket.connect(Unknown Source)
    at org.apache.http.conn.scheme.PlainSocketFactory.connectSocket(PlainSocketFactory.java:127)
    at org.apache.http.impl.conn.DefaultClientConnectionOperator.openConnection(DefaultClientConnectionOperator.java:180)
    at org.apache.http.impl.conn.ManagedClientConnectionImpl.open(ManagedClientConnectionImpl.java:294)
    at org.apache.http.impl.client.DefaultRequestDirector.tryConnect(DefaultRequestDirector.java:643)
    at org.apache.http.impl.client.DefaultRequestDirector.execute(DefaultRequestDirector.java:479)
    at org.apache.http.impl.client.AbstractHttpClient.execute(AbstractHttpClient.java:906)
    at org.apache.http.impl.client.AbstractHttpClient.execute(AbstractHttpClient.java:805)
    at org.apache.http.impl.client.AbstractHttpClient.execute(AbstractHttpClient.java:784)
Run Code Online (Sandbox Code Playgroud)

代码是,

    for (int i = 0; i < 15000; i++) {
        try {
            if (i % 1000 == 0) System.out.println("Iterations: " + Integer.toString(i));
            HttpGet request = new HttpGet("http://localhost:9080");
            DefaultHttpClient client = new DefaultHttpClient();
            HttpResponse response = client.execute(request, new BasicHttpContext());
            HttpEntity entity = response.getEntity();
            EntityUtils.consume(entity);
        } catch (Exception e) {
            e.printStackTrace();
            System.out.println("Iterations: " + Integer.toString(i));
            System.exit(1);
        }
    }
Run Code Online (Sandbox Code Playgroud)

如果我缓存 DefaultHttpClient,则不会发生错误。也试过了,

        request.releaseConnection();
        client.getConnectionManager().shutdown();
Run Code Online (Sandbox Code Playgroud)

但不会改变错误。该错误似乎不是由客户端引起的。如果我访问 URL 中的另一个网站,那就没问题了。好像是windows下的Tomcat用完文件句柄或者socket资源什么的导致的。如果我在崩溃后立即将它作为另一个进程再次运行,它将在 1 次运行而不是 13,000 次中失败,因此问题是 Tomcat 资源不足。似乎 DefaultHttpClient 没有关闭它的连接,或者 Tomcat 在 gc 发生之前没有释放它的连接。

使用 HTTPClient 4.2.5

任何想法为什么会发生,或如何解决?

use*_*814 5

我无法重现您遇到的相同错误。无论如何,当我在单线程中运行您的示例时,我收到 NoRouteToHostException。

13:37:57.917 [main] DEBUG org.apache.http.impl.conn.BasicClientConnectionManager - Releasing connection org.apache.http.impl.conn.ManagedClientConnectionImpl@2c7ceffa
Iterations: 16329
java.net.NoRouteToHostException: Can't assign requested address (Address not available)
        at java.base/java.net.PlainSocketImpl.socketConnect(Native Method)
        at java.base/java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:399)
        at java.base/java.net.AbstractPlainSocketImpl.connectToAddress(AbstractPlainSocketImpl.java:242)
        at java.base/java.net.AbstractPlainSocketImpl.connect(AbstractPlainSocketImpl.java:224)
        at java.base/java.net.SocksSocketImpl.connect(SocksSocketImpl.java:403)
        at java.base/java.net.Socket.connect(Socket.java:591)
        at org.apache.http.conn.scheme.PlainSocketFactory.connectSocket(PlainSocketFactory.java:121)
        at org.apache.http.impl.conn.DefaultClientConnectionOperator.openConnection(DefaultClientConnectionOperator.java:180)
        at org.apache.http.impl.conn.ManagedClientConnectionImpl.open(ManagedClientConnectionImpl.java:326)
        at org.apache.http.impl.client.DefaultRequestDirector.tryConnect(DefaultRequestDirector.java:605)
        at org.apache.http.impl.client.DefaultRequestDirector.execute(DefaultRequestDirector.java:440)
        at org.apache.http.impl.client.AbstractHttpClient.doExecute(AbstractHttpClient.java:835)
        at org.apache.http.impl.client.CloseableHttpClient.execute(CloseableHttpClient.java:83)
    at com.demo.DemoApplication.main(DemoApplication.java:25)
Run Code Online (Sandbox Code Playgroud)

您以比关闭连接更快的速度打开连接 - 在释放套接字以供新连接使用之前,关闭套接字保持在 TIME_WAIT 状态。

仅出于测试目的,您可以设置tcp_tw_reuse以允许重用 TIME_WAIT 套接字。

在我的 OSX 上,我可以更改测试的最大段寿命,错误消失了。

须藤 sysctl -w net.inet.tcp.msl=1000 net.inet.tcp.msl: 15000 -> 1000

DefaultHttpClientBasicClientConnectionManager它创建和管理单个连接支持,并且对于任何路由一次只保留一个活动连接。

当连接被释放回连接管理器时,它会保持活动状态以供重用,并被标记为可重用。

如果我缓存 DefaultHttpClient,则不会发生错误。

这正是解决方案。我相信使用单个 http 客户端并允许连接管理器完成其工作的正确方法。

所有连接管理都在apache 文档中进行了解释

4.2.5 已经很旧了(2013 年 4 月)。如果您开始一个新项目,那么在撰写本文时更新到 latest(4.5.12) 是有意义的。

参考:

https://cwiki.apache.org/confluence/display/HTTPCOMPONENTS/FrequentlyAskedConnectionManagementQuestions

https://raby.sh/osx-where-are-my-time_wait.html