Postgres - python 多个 SSL 连接

Question

我在使用 psycopg2 和 SSL 建立两个并发 Postgres 数据库连接（一个到主数据库，一个到从数据库）时遇到问题。两个连接分别工作，即：

import psycopg2
dsnMaster='dbname=... sslcert=path/to/master/cert'
psycopg2.connect(dsnMaster, connection_factory=None, async=False)

有效，也是如此

import psycopg2
dsnSlave='dbname=... sslcert=path/to/slave/cert'
psycopg2.connect(dsnSlave, connection_factory=None, async=False

但同时加入两者

import psycopg2
dsnMaster='dbname=... sslcert=path/to/master/cert'
psycopg2.connect(dsnMaster, connection_factory=None, async=False)
dsnSlave='dbname=... sslcert=path/to/slave/cert'
psycopg2.connect(dsnSlave, connection_factory=None, async=False)

第二次连接总是失败，带有SSL error: block type is not 01 . psycopg 似乎使用了之前连接的证书。

我尝试 .close() 第一个连接（如此处所示，但没有使用 psycopg2 动态在 python 中更改 ssl 数据库（postgresql）），并且还尝试了各种 psycopg.extensionsisolation_level 选项，但没有成功。

提前致谢！

Answer 1

我相信我已经将问题追溯到 libq...PostgreSQL C 库。

我也注意到我无法对 2 个不同的连接使用不同的 ssl 客户端证书。第一个连接总是成功，而第二个连接总是失败SSL error: certificate verify failed

在服务器日志上我得到could not accept SSL connection: tlsv1 alert unknown ca

这告诉我第二个连接可能尝试使用第一个连接中的 ssl 证书，而不是使用被告知要使用的 ssl 证书。

考虑这段代码

import psycopg2
conn1 = psycopg2.connect('host=server1... sslcert=path/to/cert1')
conn2 = psycopg2.connect('host=server2... sslcert=path/to/cert2')

连接 2 似乎使用 cert1 而不是 cert2

我认为 psycopg2 有问题...也许它正在缓存客户端 ssl 证书...

我继续构建了 psycopg2 的调试版本并安装了它。我再次尝试了我的代码并获得了大量的调试信息。这是我得到的调试信息。（我只是发布相关信息）

[98940] psyco_connect: dsn = 'dbname=testdb user=testdb host=server1 sslrootcert=root1.crt sslkey=cert1.key sslcert=cert1.crt sslmode=verify-full', async = 0
[98940] connection_setup: init connection object at 0x103093048, async 0, refcnt = 1
[98940] con_connect: connecting in SYNC mode
[98940] conn_connect: new postgresql connection at 0x10047ff90
[98940] conn_connect: server standard_conforming_strings parameter: on
[98940] conn_connect: server requires E'' quotes: NO
[98940] conn_connect: using protocol 3
[98940] conn_connect: client encoding: UTF8
[98940] clear_encoding_name: UTF8 -> UTF8
[98940] conn_connect: DateStyle ISO, MDY
[98940] connection_setup: good connection object at 0x103093048, refcnt = 1
# ... Got a good 1st connection here
# ... (Tons more lines of output before the 2nd connection)
[98940] psyco_connect: dsn = 'dbname=testdb user=testdb host=server2 sslrootcert=root2.crt sslkey=cert2.key sslcert=cert2.crt sslmode=verify-full', async = 0
[98940] connection_setup: init connection object at 0x103093170, async 0, refcnt = 1
[98940] con_connect: connecting in SYNC mode
[98940] conn_connect: new postgresql connection at 0x100682d30
[98940] conn_connect: PQconnectdb(dbname=testdb user=testdb host=server2 sslrootcert=root2.crt sslkey=cert2.key sslcert=cert2.crt sslmode=verify-full) returned BAD
[98940] connection_init: FAILED
[98940] conn_close: PQfinish called
[98940] connection_dealloc: deleted connection object at 0x103093170, refcnt = 0

如果我切换两个连接，结果是相同的...第一个连接成功，但第二个连接失败。因此，第二个连接的 dsn 是正确的，因为如果先执行，连接就会成功。

查看 psycopg2 的源代码，它只是PQconnectdb从 libq C 库调用......并且使用正确的参数调用它。您可以查看http://www.postgresql.org/docs/9.4/static/libpq-connect.html#LIBPQ-PQCONNECTDBPQconnectdb上 的文档

这告诉我 psycopg2 正在使用PQconnectdb正确的参数正确调用，PQconnectdb只是在第二个连接上没有使用正确的证书。

更重要的是我也用其他程序做了一些测试。我测试了 Navicat for PostgreSQL（Mac 版本）——同样的问题。第一次连接成功，第二次连接验证证书失败。当我重新启动 Navicat 时，它再次发生...无论我尝试什么顺序，第一个连接成功，第二个连接失败。

PgAdmin 也会发生同样的情况（目前最新版本是 1.20）。第一次连接成功，第二次连接失败。

我怀疑任何连接 PostgreSQL 的软件或模块只要使用 libq 来连接都会遇到同样的问题。事实上，我什至测试了PHP，并得到了相同的结果

root@test:~# php -a
Interactive mode enabled

php > // Test with server 1 first
php > $conn = pg_connect('host=server1 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt');
php > $conn2 = pg_connect('host=server2 user=testdb dbname=testdb sslcert=cert2.crt sslmode=verify-full sslkey=cert2.key sslrootcert=root2.crt');
PHP Warning:  pg_connect(): Unable to connect to PostgreSQL server: SSL error: certificate verify failed in php shell code on line 1
php > quit
root@test:~# php -a
Interactive mode enabled

php > // Test with server 2 first
php > $conn2 = pg_connect('host=server2 user=testdb dbname=testdb sslcert=cert2.crt sslmode=verify-full sslkey=cert2.key sslrootcert=root2.crt');
php > $conn = pg_connect('host=server1 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt');
PHP Warning:  pg_connect(): Unable to connect to PostgreSQL server: SSL error: certificate verify failed in php shell code on line 1
php > quit
root@test:~# php -a
Interactive mode enabled

php > // Test using the same certificate
php > $conn = pg_connect('host=server1 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt');
php > $conn2 = pg_connect('host=server2 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt');
php > // No problems. Both connect just fine now

我的建议是使用 PostgreSQL 提交错误报告。不确定这是否是提交此类错误报告的正确位置 http://www.postgresql.org/support/submitbug/

在此之前，我能够想出一个适合我的解决方案......现在的解决方案是简单地为两台服务器使用相同的证书。如果你能做到这一点，它适用于两个连接，并且你可以有 2 个单独的连接到 2 个单独的服务器...（只要两个连接可以使用相同的客户端证书进行连接）

对我来说，我只是为两台服务器使用了相同的服务器 ssl 证书、私钥和根证书...我只是使用通配符作为公用名称并自己签署了证书（但如果您愿意，您可以使用商业通配符证书）然后，我生成了一个客户端证书并将该证书用于两个连接。

这可能不是您正在寻找的答案，但这似乎是您可以使用客户端证书身份验证通过 SSL 与 2 个不同服务器建立 2 个连接的唯一方法。无论您使用什么编程语言或软件，都是如此。

所以，你的代码现在变成这样：

import psycopg2
dsnMaster='dbname=... sslcert=path/to/master/cert'
psycopg2.connect(dsnMaster, connection_factory=None, async=False)

# Here, the dsnSlave simply uses the same cert as the master
# Other connection details like the host and dbname can be different
dsnSlave='dbname=... sslcert=path/to/master/cert'
psycopg2.connect(dsnSlave, connection_factory=None, async=False)

这是我在 python 中运行的实际代码

root@test:~# python3
Python 3.4.0 (default, Jun 19 2015, 14:20:21) 
[GCC 4.8.2] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import psycopg2
>>> dsn1 = 'host=server1 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt'
>>> conn1 = psycopg2.connect(dsn1)
>>> dsn2 = 'host=server2 user=testdb dbname=testdb sslcert=cert1.crt sslmode=verify-full sslkey=cert1.key sslrootcert=root1.crt'
>>> conn2 = psycopg2.connect(dsn2)
>>> # YAY, no issues and both connections work