docker swarm 数据库连接由对等方重置

Question

我正在使用 docker swarm 运行 Spring Boot 应用程序，并且我使用 postgres 作为数据库。当我将它们都作为 docker 服务运行时，数据库连接会持续且随机地失败（如您在时间戳上所见），如日志所示：

2017-10-26T 17:14:15 .200415747Z app-db.1.1ayo6h8ro1og@scw-c2964a | 日志：无法从客户端接收数据：对等方重置连接

2017-10-26T 17:43:36 .481718562Z app-db.1.1ayo6h8ro1og@scw-c2964a | 日志：无法从客户端接收数据：对等方重置连接

2017-10-26T 17:43:56 .954152654Z app-db.1.1ayo6h8ro1og@scw-c2964a | 日志：无法从客户端接收数据：对等方重置连接

2017-10-26T 17:44:17 .434171472Z app-db.1.1ayo6h8ro1og@scw-c2964a | 日志：无法从客户端接收数据：对等方重置连接

2017-10-26T 17:49:04 .154174253Z app-db.1.1ayo6h8ro1og@scw-c2964a | 日志：无法从客户端接收数据：对等方重置连接

我无法理解或发现这样做的原因。我很感激任何想法。

编辑：

我们意识到，在测试应用程序时，它也会抛出这样的错误：

SQLTransientConnectionException: HikariPool-1 - 连接不可用，请求在 937517 毫秒后超时

谢谢。

Answer 1

我在部署 Spring Boot 应用程序和 PostgreSQL 的 Docker Swarm 堆栈时遇到了同样的错误。在与此斗争了大约一个星期后，我发现问题在于防火墙由于不活动而断开容器之间的连接。快速回答，在 linux 机器上运行以下 cmd：

sudo sysctl -w \
net.ipv4.tcp_keepalive_time=600 \
net.ipv4.tcp_keepalive_intvl=60 \
net.ipv4.tcp_keepalive_probes=3

同样，我还包含了以下 tomcat 连接池属性：

tomcat:
  max-active: 10
  initial-size: 5
  max-idle: 8
  min-idle: 5
  test-on-borrow: true
  test-while-idle: true
  test-on-return: false
  test-on-connect: true
  validation-query: SELECT 1
  validation-interval: 30000
  max-wait: 30000
  min-evictable-idle-time-millis: 60000
  time-between-eviction-runs-millis: 5000
  remove-abandoned: true
  remove-abandoned-timeout: 60

解决方案来自这篇博文：DEALING WITH NODENOTAVAILABLE EXCEPTIONS IN ELASTICSEARCH

Answer 2

还有另一种方法可以防止关闭空闲连接。该问题与默认 swarm 服务发现有关，它在 15 分钟后关闭空闲连接。
显式指定dnsrr 端点模式可以解决问题，例如：

version: '3.3'

services:
  foo-service:
    image: example/foo-service:latest
    hostname: foo-service
    networks:
      - foo_network
    deploy:
      endpoint_mode: dnsrr
      # ...

networks:
  foo_network:
    external: true
    driver: overlay