使用aiohttp和asyncio时编写单元测试

amo*_*ian 7 python python-asyncio aiohttp

我正在更新我的一个Python包,所以它是异步的(使用aiohttp而不是requests).我也在更新我的单元测试,所以他们使用新的异步版本,但我遇到了一些问题.

这是我的包中的一个片段:

async def fetch(session, url):
    while True:
        try:
            async with session.get(url) as response:
                assert response.status == 200
                return await response.json()
        except Exception as error:
            pass


class FPL():
    def __init__(self, session):
        self.session = session

    async def get_user(self, user_id, return_json=False):
        url = API_URLS["user"].format(user_id)
        user = await fetch(self.session, url)

        if return_json:
            return user
        return User(user, session=self.session)
Run Code Online (Sandbox Code Playgroud)

所有这些似乎都在使用时如此:

async def main():
    async with aiohttp.ClientSession() as session:
         fpl = FPL(session)
         user = await fpl.get_user(3808385)
         print(user)

loop = asynio.get_event_loop()
loop.run_until_complete(main())

>>> User 3808385
Run Code Online (Sandbox Code Playgroud)

不幸的是我的单元测试遇到了一些麻烦.我以为我可以简单地做一些事情

def _run(coroutine):
    return asyncio.get_event_loop().run_until_complete(coroutine)


class FPLTest(unittest.TestCase):
    def setUp(self):
        session = aiohttp.ClientSession()
        self.fpl = FPL(session)

    def test_user(self):
        user = _run(self.fpl.get_user("3523615"))
        self.assertIsInstance(user, User)

        user = _run(self.fpl.get_user("3523615", True))
        self.assertIsInstance(user, dict)

if __name__ == '__main__':
    unittest.main()
Run Code Online (Sandbox Code Playgroud)

它会给出错误

DeprecationWarning: The object should be created from async function loop=loop)
Run Code Online (Sandbox Code Playgroud)

ResourceWarning: Unclosed client session <aiohttp.client.ClientSession object at 0x7fbe647fd208>
Run Code Online (Sandbox Code Playgroud)

我已经尝试向关闭会话_close()FPL类添加一个函数,然后从测试中调用它,但这也不起作用,仍然说有一个未关闭的客户端会话.

是否有可能做到这一点,我,我只是做错了什么,还是我最好使用类似asynctestpytest-aiohttp替代?

编辑:我还检查了aiohttp文档,并找到了一个示例,展示了如何使用标准库的unittest测试应用程序.不幸的是我无法让它工作,因为loop提供的AioHTTPTestCase已经从3.5以来被弃用并且引发了错误:

class FPLTest(AioHTTPTestCase):
    def setUp(self):
        session = aiohttp.ClientSession()
        self.fpl = FPL(session)

    @unittest_run_loop
    async def test_user(self):
        user = await self.fpl.get_user("3523615")
        self.assertIsInstance(user, User)

        user = await self.fpl.get_user("3523615", True)
        self.assertIsInstance(user, dict)
Run Code Online (Sandbox Code Playgroud)

tests/test_fpl.py:20: DeprecationWarning: The object should be created from async function
  session = aiohttp.ClientSession()
  ...
======================================================================
ERROR: test_user (__main__.FPLTest)
----------------------------------------------------------------------
Traceback (most recent call last):
  File "/home/amos/Documents/fpl/venv/lib/python3.7/site-packages/aiohttp/test_utils.py", line 477, in new_func
    return self.loop.run_until_complete(
AttributeError: 'FPLTest' object has no attribute 'loop'

======================================================================
ERROR: test_user (__main__.FPLTest)
----------------------------------------------------------------------
Traceback (most recent call last):
  File "/home/amos/Documents/fpl/venv/lib/python3.7/site-packages/aiohttp/test_utils.py", line 451, in tearDown
    self.loop.run_until_complete(self.tearDownAsync())
AttributeError: 'FPLTest' object has no attribute 'loop'
Run Code Online (Sandbox Code Playgroud)

SCo*_*vin 6

将 pytest 与aiohttp-pytest 一起使用

async def test_test_user(loop):
    async with aiohttp.ClientSession() as session:
         fpl = FPL(session)
         user = await fpl.get_user(3808385)
    assert isinstance(user, User)
Run Code Online (Sandbox Code Playgroud)

现代python开发者的谚语:人生苦短,不使用pytest。

您可能还想设置一个模拟服务器来在测试期间接收您的 http 请求,我没有一个简单的例子,但可以在这里看到一个完整的工作示例。

  • 您不必转换所有测试,只需转换需要异步行为的测试。`pytest` 运行标准单元测试样式测试绝对没问题。 (4认同)
  • 此外,从 unittest 切换到 py.test 很像从 urllib2 切换到 requests - 这种改进让人永远不会回头,只会后悔没有早点进行切换! (3认同)
  • 我同意,到目前为止它真的很棒。最后,我创建了一些固定装置,允许我在测试中访问例如`fpl` 对象。转换所有内容甚至不需要那么长时间,它看起来比以前干净多了。 (2认同)