V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
scriptkid
V2EX  ›  Python

关于 Python 多线程的一点疑问

  •  
  •   scriptkid · 2016-10-19 15:03:44 +08:00 · 2004 次点击
    这是一个创建于 2746 天前的主题,其中的信息可能已经有所发展或是发生改变。

    本人学 Python 主要是通过《 Python 核心编程第二版》自学的,关于多线程方面该书是推荐使用 threading 而不用 thread ,一般都是使用重写 run 方法或者类似如下代码:

        threads = []
        for i in nloops:
            t = threading.Thread(target=func,args=(i,arg))
            threads.append(t)
        for t in threads:
            t.start()
        for t in threads:
            t.join()
    

    当然,可能还会涉及到生产者消费者的问题,但是就目前已查阅到的各方面资料,好像大多数并未提及多线程问题中常见的线程数
    那么,如上的 Python 多线程的线程数是多少?又该怎样自己设置线程数?(如果有这种说法)
    除此之外还想问的是怎样才能更好地使用 Python 的多线程,怎么确定要不要用生产者消费者的方式?
    以上,坐等老司机指点

    GeekGao
        1
    GeekGao  
       2016-10-19 15:49:30 +08:00
    静态的看此段代码,会开启 nloops 个线程,至于设置线程数看你创建多少线程对象并且 start 了;
    生产者与消费者,要看你的具体业务是啥,如果是本地应用,我认为一般的设计是可以拆成独立的类 /模块,各自干各自的。当然最好用线程池了(若生产者+消费者都为多线程,模式同理),减少创建线程的开销,更好的控制你的线程。
    ryd994
        2
    ryd994  
       2016-10-20 00:35:59 +08:00 via Android
    一般你这种情况不直接用线程,用 thredpool map 一下最方便
    264768502
        3
    264768502  
       2016-10-20 07:32:42 +08:00 via iPad
    因为 CPython 有 GIL ,所以多线程的意义不是那么大了(比如 CPU 密集就该多进程, IO 密集就异步)
    具体多少线程合适要实际测试下才知道

    针对 LZ 的这个简单情况,一定要用多线程的话,可以看看 multiprocess.dummy 里现成的线程池 pool
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   981 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 22:28 · PVG 06:28 · LAX 15:28 · JFK 18:28
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.