使用Python 3中的urllib进行socket ResourceWarning

Question

我正在使用urllib.request.urlopen()从我正在尝试测试的Web服务获取GET.

这将返回一个HTTPResponse对象,然后我读取()以获取响应主体.

但我总是看到一个关于来自socket.py的未封闭套接字的ResourceWarning

这是相关的功能:

from urllib.request import Request, urlopen

def get_from_webservice(url):
    """ GET from the webservice  """
    req = Request(url, method="GET", headers=HEADERS)
    with urlopen(req) as rsp:
        body = rsp.read().decode('utf-8')
        return json.loads(body)

这是程序输出中出现的警告:

$ ./test/test_webservices.py
/Library/Frameworks/Python.framework/Versions/3.3/lib/python3.3/socket.py:359: ResourceWarning: unclosed <socket.socket object, fd=5, family=30, type=1, proto=6>
self._sock = None
.s
----------------------------------------------------------------------
Ran 2 tests in 0.010s

OK (skipped=1)

如果我可以对HTTPResponse(或Request？)做任何事情让它干净地关闭它的套接字,我真的很想知道,因为这个代码是我的单元测试; 我不喜欢在任何地方忽略警告,但尤其不在那里.

Answer 1

我不知道这是否是答案，但这是答案的一部分。

如果我将标头“connection: close”添加到 Web 服务的响应中，则 HTTPResponse 对象似乎会在没有警告的情况下正确清理自身。

事实上，HTTP 规范 ( http://www.w3.org/Protocols/rfc2616/rfc2616-sec14.html ) 说：

不支持持久连接的 HTTP/1.1 应用程序必须在每条消息中包含“关闭”连接选项。

所以问题出在服务器端（即我的错！）。如果您无法控制来自服务器的标头，我不知道您能做什么。