Python的全局锁

最新推荐文章于 2024-11-01 18:50:22 发布
原创 最新推荐文章于 2024-11-01 18:50:22 发布 · 2.1k 阅读 · 2
标签
#python
本文介绍了Python的全局解释器锁（GIL），指出其在CPU密集型任务中限制了多线程的并行执行，但在IO密集型任务中表现较好。GIL在遇到IO操作或达到一定执行时间后会释放，但不保证线程安全，可能引发并发问题。文章探讨了GIL对线程安全的影响，并举例说明了线程不安全的情况。

介绍

GIL (Global Interperter Lock) 称作全局解释器锁，也可以称它为全局排他锁。GIL只在CPython中存在。比如JPython就没有这个概念。

GIL对程序的影响

在python多线程的情况下，每个线程的执行方式是这样的

获取GIL -> 执行代码,直到遇到IO操作,执行了一定的代码量(python2),执行了一定的时间(python3) -> 释放GIL

那么问题来了，GIL是全局锁，也就是一个进程中只有一个，没有拿到GIL就不允许在CPU中执行，所以Python多线程在并不能充分利用多核CPU。

CPU密集型

CPU密集型任务的主要特点就是需要进行大量的计算，消耗CPU资源。CPU密集型程序虽然可以采用多任务来完成，但任务数越多花在任务切换的时间也就越多，所以要高效的利用CPU，CPU密集型任务的数量在理想的情况下应该等于CPU核心数+1。

多任务可以使用多进程和多线程来实现，在多进程情况下，进程数应该等于CPU核心数+1，多线程情况下，线程数也应该等于CPU核心数+1。Python在多进程下没有什么问题，但是在多线程下问题就出来了。

由于Python的GIL的存在，一个进程中只能有一个线程在执行，无法充分利用多核CPU。所以Python的多线程在处理CPU密集型任务时并不是很友好，解决的办法就是使用多进程+协程的方式。

IO密集型

IO密集型任务的主要特点就是大量涉及到网络、磁盘IO的任务。这类任务对CPU的消耗很低，任务的大部分时间都在等待IO操作完成，对于IO密集型任务，任务数越多，CPU的效率就越高，但是也有一个限度。比较理想的任务数是CPU核心数/(1-阻塞系数)，阻塞系数一般在0.8-0.9，所以任务数应为核心数的5倍或10倍。

Python的线程会在遇到IO操作时释放GIL，执行别的线程， 所以Python多线程对IO密集型任务比较友好。

最低0.47元/天 解锁文章
python的GIL锁（非常详细）
谈笑的博客
10-17 1万+
在了解python异步IO的过程中，接触到了python的GIL锁，找了许多国内外的资料，阅读完后发现较于其他博客中的说法有了更深的一些了解，因此写了这篇博客来进行记录，本文中的部分内容引用自real python，感觉是讲得最好的一份资料。 https://realpython.com/python-gil/ 一、GIL锁简介 简而言之，Python全局解释器锁或GIL是一种互斥锁（或锁），仅允许一个线程持有Python解释器的控制权。 这意味着在任何时间点只能有一个线程处于执行状态。对于执行单线程程
Python的全局锁GIL
舌尖上的蛋炒饭的博客
03-20 996
但是这个只解决了这一个问题啊，其实所有的python object都有这个问题，所以python的开发者，为了解决这个问题，决定使用全局锁GIL，这个锁，每个bytecode在运行的时候都是拿到了线程锁的，也就是没有bytecode被其他线程打断，那这种全局锁有什么好处。3、对于单线程的程序，或者没有办法多线程的程序，那全局锁的性能非常好，因为要锁是要时间的，全局锁保证了每个bytecode只要一次锁，但是如果你是那种每个object都有自己的锁的话，嗯，可想而知。3、执行两次a-=1，结果a=-1。
什么是Python全局锁(GIL)，如何避开GIL限制？
热门推荐
Python技术探索
06-25 2万+
Python 全局解释器锁(Global Interpreter Lock, 简称GIL) 是一个互斥锁（或锁），只允许一个线程保持 Python 解释器的控制权。这意味着在任何时间点都只能有一个线程处于执行状态。执行单线程程序的开发人员看不到 GIL 的影响，但它可能是 CPU 密集型和多线程代码中的性能瓶颈。本文介绍了3种避开全局锁限制的方法：多进程编程，Cython, 其它解释器
【python】GIL全局锁
qq_37016994的博客
03-30 3476
全局解释器锁（Global Interpreter Lock，GIL）规定全局范围内任意时候一个进程里只能同时执行一个线程。每一个线程在执行时，都会锁住GIL，以阻止别的线程执行；执行一段时间后，会释放GIL，以允许别的线程开始利用资源，如果遇到阻塞情况，也会提前释放锁。
python——GIL锁详解
python全栈
11-21 8449
对于IO密集型应用，即便有GIL存在，由于IO操作会导致GIL释放，其他线程能够获得执行权限。由于多线程的通讯成本低于多进程，因此偏向使用多线程。对于计算密集型应用，由于CPU一直处于被占用状态，GIL锁直到规定时间才会释放，然后才会切换状态，导致多线程处于绝对的劣势，此时可以采用多进程+协程。
面试必备之 GIL（全局解释器锁）
weixin_48693408的博客
09-15 3305
面试常见问题python中的GIL锁，GIL优缺点
python 多线程 全局锁_Python全局锁中如何合理运用多线程（多进程）
weixin_39601641的博客
12-06 250
Python全局锁(1)全局锁导致的问题全局锁的英文简称是GIL，全称是Global Interpreter Lock(全局解释器锁)，来源是python设计之初的考虑，为了数据安全所做的决定，每个线程在执行时候都需要先获取GIL，保证同一时刻只有一个线程可以执行代码，即同一时刻只有一个线程使用CPU，也就是说多线程并不是真正意义上的同时执行。每个CPU在同一时间只能执行一个线程(在单核CPU下的...
并发编程06—全局锁，python已经有全局锁，为什么还要加锁lock
weixin_44549853的博客
04-27 405
python默认有个全局锁，意思就是默认会开启锁，但是这个锁是有容量限制的，超出容量就取消，执行其他线程，所以在线程程消耗时间少的时候是安全的，线程消耗时间长的时候就不安全了，需要手动上锁 ...
搞懂python全局锁GIL
专注金融量化投资交易 策略开发
04-10 421
每个进程内的多线程执行会受到各自进程内GIL的约束，但这两个进程之间的执行是并行且互不影响的。如果您在两个进程中分别启动了多线程程序，尽管每个进程内的多线程由于GIL不能实现真正的并行计算，但两个进程作为整体是可以利用多核CPU资源并行工作的。当您提到“a.py文件和b.py运行在两个不同的进程中”，这意味着每个文件各自在一个独立的Python进程内执行。在同一python环境中，a.py文件和b.py运行在两个不同的进程中，a和b会同时受到同一个全局锁的限制吗。
Python的全局锁GIL解析
最新发布
11-01 1161
GIL 是什么：GIL 是一个全局锁，确保同一时间只有一个线程执行 Python 字节码。GIL 的原因：主要为了保证数据一致性，避免加锁带来的复杂性。GIL 的影响：GIL 限制了多核 CPU 上的 Python 多线程性能表现，尤其是在 CPU 密集型任务中；但对于 I/O 密集型任务，影响较小。通过示例代码，我们可以看到 GIL 如何限制了多线程 Python 程序的并行性。在实际应用中，Python 程序员可以通过使用多进程（而不是多线程）来避开 GIL 的影响，或者使用如Cython。
python——全局解释器锁（GIL）
python全栈
10-14 6794
顾名思义，就是正在运行中的程序。是操作系统中分配任务的最小基本单元；线程是进程中执行运算的最小单位，是进程中的一个实体，是被系统独立调度和分派的基本单位。线程自己不拥有系统资源；但它可与同属一个进程的其它线程共享进程所拥有的全部资源。一个线程可以创建和撤消另一个线程，同一进程中的多个线程之间可以并发执行。
python3的全局解释器锁是什么意思？有什么要注意的？
天河书阁 - VicRestart
07-14 876
Python中的全局解释器锁（Global Interpreter Lock，GIL）是一种机制，用于确保在任何给定时间只有一个线程执行Python字节码。GIL是由Python解释器实现的，对于CPython解释器来说是存在的，其他一些Python解释器（如Jython和IronPython）可能没有GIL。
python中线程锁（Lock）的应用、全球变量(global)、设置锁acquire()、释放锁release()、目标(target=函数,args=(参数,))
水亦流人必上的博客
07-29 1505
import threading lock=threading.Lock() #创建一个线程锁 num=100 def run(name): lock.acquire() #设置锁 global num #global全局变量的意思、这里就是设置num这个变量为全局变量 num=num-1 #函数主体、也就是run这个函数的值是NUM-1 print('线程',num,'执行了，目前NUM的值为：',num) lock.rel.
解析Python中的全局解释器锁（GIL）：影响、工作原理及解决方案
qq_41586251的博客
12-20 1万+
本文深入介绍了Python中的全局解释器锁（GIL）。首先解释了GIL的定义和工作原理，说明了它对Python程序多线程执行的影响。接着探讨了如何解决GIL的限制，包括使用多进程、C扩展、异步编程、线程池等方法。最后强调了对于不同任务类型选择合适的并发策略的重要性。通过本文的阐述，读者能够深入了解GIL的影响以及多种解决方案，从而更好地优化Python程序的并发性能。
Python全局解释器锁（Global Interpreter Lock，简称 GIL）, 互斥锁
几许的博客
12-03 2009
互斥锁（Mutex Lock）是一种同步原语，用于在多线程或多进程环境中控制对共享资源的访问。在 Python 中，你可以使用threading模块（用于线程）或模块（用于进程）提供的Lock类来实现互斥锁。互斥锁的主要目的是确保在任何时刻只有一个线程（或进程）能够访问共享资源，以防止数据竞态和不一致的状态。在并发编程中，多个线程或进程可能同时访问和修改共享的数据，而互斥锁能够帮助你控制这种访问，确保数据的一致性。
GIL全局解释器锁
清风
10-17 1640
GIL锁的英文全称 : Global Interpreter Lock , 中文意思是 : 全局解释器锁 . 在 CPython 解释器中 , GIL 是一把互斥锁 , 用来阻止同一个进程下多个线程的同时执行 . * GIL 不是 Python 的特点 , 而是 CPython 解释器的特点 .
python之GIL锁
qq_38039965的博客
12-21 920
GIL全局解释器锁
Python-- GIL 锁简述
weixin_43988680的博客
04-18 4428
GIL 的定义；为什么会有 GIL 锁；GIL 锁与普通的线程锁有什么区别； CPython 解释器多线程是否真的无法利用多核优势？
Python--GIL（全局解释器锁）
weixin_42367888的博客
01-16 1383
Python--GIL（全局解释器锁）
Python--GIL锁
bb8886的博客
08-01 715
python中的GIL
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值