使用 boto3 从 docker 容器内部连接到 DynamoDB Local

Question

为了进行测试，我尝试从docker内部运行我的 python 3.4 应用程序，并连接到DynamoDB Local实例。我可以毫无问题地从主机访问 DynamoDB 本地。

但是，当我从 docker 容器中点击它时，我收到了“连接被拒绝错误”。我尝试在容器中本地运行 DynamoDB 并将其链接到应用程序的 docker 容器，然后在主机上运行它。一种猜测是缺少一些环境变量，但我无法弄清楚。我无助于将我的~/.aws目录链接为一个卷。

这是一些重现错误的测试代码：

import boto3

print('creating dynamodb resource')

dynamodb = boto3.resource(
    'dynamodb',
    endpoint_url='http://localhost:8001',
    region_name='dummy_region',
    aws_access_key_id='dummy_access_key',
    aws_secret_access_key='dummy_secret_key',
    verify=False)

print ('got resource:', dynamodb)

print('adding table')

result = dynamodb.create_table(
    TableName='foo',
        KeySchema=[
            {
                'AttributeName': 'from_email',
                'KeyType': 'HASH'  # Partition key
            },
            {
                'AttributeName': 'raw_id',
                'KeyType': 'RANGE'  # Sort key
            },
        ],
        AttributeDefinitions=[
            {
                'AttributeName': 'from_email',
                'AttributeType': 'S'
            },
            {
                'AttributeName': 'raw_id',
                'AttributeType': 'N'
            },
        ],
        ProvisionedThroughput={
            'ReadCapacityUnits': 10,
            'WriteCapacityUnits': 10
        }
    )

print('created table:', result)

print('getting table')

table = dynamodb.Table('foo')

print('got table:', table)

从主机运行它，这是我的输出：

(workbench) ryan@ryan:~/dev/$ python dyn.py 
creating dynamodb resource
got resource: dynamodb.ServiceResource()
adding table
created table: dynamodb.Table(name='foo')
getting table
got table: dynamodb.Table(name='foo')

从容器外壳内部运行相同的代码：

root@e88da4d624e0:/src# python dyn.py 
creating dynamodb resource
got resource: dynamodb.ServiceResource()
adding table
[... traceback clipped ...]
  File "/usr/local/lib/python3.4/site-packages/botocore/vendored/requests/packages/urllib3/connection.py", line 155, in connect
    conn = self._new_conn()
  File "/usr/local/lib/python3.4/site-packages/botocore/vendored/requests/packages/urllib3/connection.py", line 134, in _new_conn
(self.host, self.port), self.timeout, **extra_kw)
  File "/usr/local/lib/python3.4/site-packages/botocore/vendored/requests/packages/urllib3/util/connection.py", line 88, in create_connection
    raise err
  File "/usr/local/lib/python3.4/site-packages/botocore/vendored/requests/packages/urllib3/util/connection.py", line 78, in create_connection
    sock.connect(sa)
ConnectionRefusedError: [Errno 111] Connection refused
[ ... ]
botocore.vendored.requests.exceptions.ConnectionError: ('Connection aborted.', ConnectionRefusedError(111, 'Connection refused'))

这是一个将重现错误的测试 dockerfile：

FROM python:3.4

ADD . /src

# python dependencies
RUN python3 -m pip install -U pip && \
    python3 -m pip install boto3

ENTRYPOINT ["/bin/bash"]

我正在像这样启动 docker 容器：

docker run --name dynamodb -p "8001:8000" -d ryan/dynamodb
docker run --link dynamodb:localhost -ti ryan/app

Answer 1

您正在使用 docker link 功能将两个容器连接在一起。这里的基本原则是：

1. 您可以使用 为数据库容器指定一个唯一的名称--name。
2. --link您可以使用在客户端容器内指定数据库容器的名称及其别名，将客户端容器链接到数据库。
3. 然后 Docker 使用其默认网络连接两者bridge。

这样做时，它不需要映射到主机网络的端口（由选项提供-p）。相反，docker 将为您完成工作，并使用您在创建链接时定义的别名在客户端容器内根据需要公开 IP 地址和端口。

然后，您可以使用此别名使用docker 自动为您创建的环境变量来查找客户端容器内的详细信息。

除了最后一步之外，你基本上已经做好了。如果您检查一下您的环境，我希望您会发现端口 8000 就是您想要的端口。