V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
0x0208v0
V2EX  ›  Python

请教各位关于 requests timeout 的问题,有小伙伴设置了 timeout,但是还是导致卡死的情况吗?其根源问题到底是什么?求大佬帮忙

  •  
  •   0x0208v0 · 2021-04-17 00:00:05 +08:00 · 1226 次点击
    这是一个创建于 1098 天前的主题,其中的信息可能已经有所发展或是发生改变。
    很久之前遇到了一个问题,在香港的阿里云服务器上,通过 requests 调用第三方 url 的某个方法,
    虽然设置了 timeout,但是还是有卡死的情况,后来就找到了这篇文章 https://www.jianshu.com/p/331fa39bc251
    请问这篇文章的根据是什么呀???其底层到底是怎么回事??怎么可以复现这种问题?
    (虽然现在很久没搞爬虫了,也很久没碰到这样的问题了,但还是很想知道原因)
    第 1 条附言  ·  2021-04-25 21:11:56 +08:00
    2 条回复    2021-04-17 11:24:23 +08:00
    listenerri
        1
    listenerri  
       2021-04-17 10:39:34 +08:00
    没看到文章里涉及到有深奥的底层、原理之类的,作者最后还是用了黑名单
    keakon
        2
    keakon  
       2021-04-17 11:24:23 +08:00
    dns 解析的时间不算在 timeout 里,你只有一个域名的话,写在 hosts 里让它不解析不就行了?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2495 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 15:44 · PVG 23:44 · LAX 08:44 · JFK 11:44
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.