使用Python通过HTTP下载压缩内容

Question

使用Python下载网页时如何利用HTTP 1.1的压缩？

我目前正在使用内置的urllib模块下载Web内容.阅读文档,我找不到任何确实使用压缩的信息.

它已经内置到urllib中了还是我可以使用另一个库？

Answer 1

httplib2支持'deflate'和'gzip'压缩.

例

import httplib2
h = httplib2.Http(".cache")
resp, content = h.request("http://example.org/", "GET")

根据需要解压缩内容.