python异步请求

Question

所以我有一个图像 url 列表，我想用请求库迭代它们并将所有图像下载到一个目录中。

def get_image(url, image_name):
    path = pathlib.Path('/path/to/some/directory')
    response = requests.get(url, stream=True)
    with open('{}/{}.png'.format(path, image_name), 'wb') as file:
        for block in response.iter_content(1024):
            file.write(block)

for url in urls:
    get_image(url, image_name)

现在，有没有办法创建一个装饰器来使一个函数成为一个回调，以便在为特定的异步请求返回响应时运行？

Answer 1

如果你想要多个并发requests+回调，你可以使用像grequests这样的模块。它与asyncio.

asyncio- 就是要避免使用回调（避免回调地狱）并使异步代码的编写与同步代码一样简单。

如果您决定尝试，asyncio您应该使用aiohttp 客户端而不是requests（这是首选方式）或requests在 asyncio 管理的线程池中运行。可以在此处找到这两种方式的示例。