northisland
V2EX  ›  问与答

怎么看 Python 运行多线程时的 GIL,这东西是 Python“伪多线程”的死穴么?

  •  
  •   northisland · Aug 1, 2016 · 3503 views
    This topic created in 3747 days ago, the information mentioned may be changed or developed.
    说点看书的体会,欢迎讨论~



    Python 白皮儿书——《 Python 核心编程第二版》,里讲:

    “
    对 Python 虚拟机的访问由全局解释器锁( Global Interpreter Lock , GIL )来控制,正式这个锁,能保证同一时刻只有一个线程运行。
    "

    看完 18.3.1 ,感觉, Python 代码不能实现多个 CPU 共同快跑,只能一次运行一个线程,虽然开了多个线程,但 GIL 强制一次只执行一个(做爬虫的同事说, Python 爬虫只能让一个 CPU 吃饱,和其他 CPU 无关)

    换言之, Python 是把多线程的执行模型,强行退化到 1 个 CPU ,退化到流水线处理模式。


    但是, 18.3.1 最后一段,的意思,我的理解是:
    这种 Python “多线程”,会让 I/O 操作在阻塞时间内,通过 GIL 切换到其他线程。
    所以,对某些界面操作,硬件调用,是有用的。
    但纯用 Python 代码,想完成计算方向的并行,是没有卵用的。




    6 replies  •  2016-08-01 15:17:56 +08:00
    virusdefender
    virusdefender
    Aug 1, 2016
    1
    IO 密集型使用多线程

    CPU 密集型使用多进程
    tabris17
    tabris17
    Aug 1, 2016
    2
    Python 的多线程意义在于:在等待 IO 的时候可以让 CPU 去执行别的代码
    Tinet
    Tinet
    Aug 1, 2016
    3
    “这种 Python “多线程”,会让 I/O 操作在阻塞时间内,通过 GIL 切换到其他线程。”

    感觉这个跟协程的调度很像啊
    ryd994
    ryd994
    Aug 1, 2016 via Android
    4
    其实对于纯 C 的部分, GIL 是不影响的,所以也可以写个多线程的 C 模块
    lammps
    Arnie97
    Arnie97
    Aug 1, 2016 via Android
    5
    “并发”不代表“并行”。计算密集型应用要另寻他法,比如多进程。
    northisland
    northisland
    OP
    Aug 1, 2016
    6
    @Arnie97
    @virusdefender

    有什么 Python 多进程方面的资料么?多谢
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5006 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 41ms · UTC 01:40 · PVG 09:40 · LAX 17:40 · JFK 20:40
    ♥ Do have faith in what you're doing.