1. 首页
  2. 编程语言
  3. Python
  4. python3爬虫GIL修改多线程实例讲解

python3爬虫GIL修改多线程实例讲解

上传者: 2022-04-22 18:51:40上传 PDF文件 304.25 KB 热度 6次

我们打开程序后,会发现电脑的内存和cpu发生了变化。在对于前者上面,自然是希望内容占用小,cpu的利用越高越好。我们都知道,比方我有一个4核的CPU,那么这样一来,在单位时间内每个核只能跑一个线程,然后时间片轮转切换。但是这就是GIL搞的鬼。任何Python线程执行前,必须先获得GIL锁,然后,每执行100条字节码,解释器就自动释放GIL锁,让别的线程有机会执行。这个GIL全局锁实际上把所有线程的执行代码都给上了锁,所以,多线程在Python中只能交替执行,即使100个线程跑在100核CPU上,也只能用到1个核。我们不妨做个试验:我的电脑是4核,所以我开了4个线程,看一下CPU资源占有率:我们发现CPU利用率并没有占满,大致相当于单核水平。

用户评论