aiohttp 并发请求被挂起

2021-06-18 21:09:39 +08:00
 Multicom

并发数 10,偶数请求立即完成,奇数请求被挂起超过 120 秒,是使用方法不对吗?

import asyncio
import aiohttp
import time

async def get(s, i):
    start = time.time()
    async with s.get('URL') as r:
        await r.read()
    print(i, ': {} s'.format(round(time.time() - start, 2)))


async def test():
    async with aiohttp.ClientSession() as s:
        await asyncio.gather(*[get(s, i) for i in range(10)])

if __name__ == "__main__":
    loop = asyncio.get_event_loop()
    loop.run_until_complete(test())

结果

0 : 0.38 s
8 : 0.4 s
2 : 0.57 s
6 : 0.6 s
4 : 0.6 s
1 : 129.49 s
9 : 129.5 s
3 : 129.52 s
7 : 129.57 s
5 : 129.63 s
1548 次点击
所在节点    Python
6 条回复
Kobayashi
2021-06-19 10:19:56 +08:00
无法复现。测试 URL https://httpbin.org/headers

❯ python test_aiohttp.py
7 : 1.16 s
1 : 1.16 s
4 : 1.16 s
9 : 1.16 s
6 : 1.16 s
2 : 1.17 s
8 : 1.17 s
3 : 1.26 s
5 : 1.26 s
0 : 1.27 s
Multicom
2021-06-20 04:15:39 +08:00
@Kobayashi 经测试,httpbin.org 确实没有问题,但 yandex.ruwww.google.com 均存在不同数量的请求被挂起 120~240 秒
onlyzdd
2021-06-20 17:13:17 +08:00
@Multicom 经测试,无法复现
Multicom
2021-06-20 18:23:24 +08:00
@onlyzdd 请问 Python 和 aiohttp 分别是什么版本?当前环境下一直存在该问题
```
root@host ~ # python3 -V
Python 3.7.3
root@host ~ # pip3 show aiohttp | grep Version
Version: 3.7.4.post0
root@host ~ # uname -a
Linux Debian-104-buster-64-minimal 5.12.10-xanmod1-cacule ...
```
onlyzdd
2021-06-21 08:39:46 +08:00
@Multicom 应该是网络问题吧
Kobayashi
2021-06-22 11:16:44 +08:00
https://www.google.com

❯ python test_aiohttp.py
0 : 1.88 s
7 : 1.89 s
6 : 1.9 s
9 : 1.93 s
8 : 1.94 s
4 : 1.97 s
3 : 1.97 s
2 : 1.97 s
1 : 2.02 s
5 : 2.03 s

https://yandex.ru

❯ python test_aiohttp.py
0 : 3.08 s
1 : 3.07 s
5 : 3.1 s
7 : 3.14 s
3 : 3.16 s
4 : 3.16 s
2 : 3.17 s
8 : 3.17 s
6 : 3.18 s
9 : 3.21 s

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/784349

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX