concurrent.futures性能阐述

最新推荐文章于 2024-11-05 11:50:28 发布

weixin_30546189

最新推荐文章于 2024-11-05 11:50:28 发布

阅读量235

点赞数

文章标签： python

原文链接：http://www.cnblogs.com/jinhh/p/10444804.html

版权

python因为其全局解释器锁GIL而无法通过线程实现真正的平行计算。这个论断我们不展开，但是有个概念我们要说明，IO密集型 vs. 计算密集型。

IO密集型：读取文件，读取网络套接字频繁。

计算密集型：大量消耗CPU的数学与逻辑运算，也就是我们这里说的平行计算。

而concurrent.futures模块，可以利用multiprocessing实现真正的平行计算。

核心原理是：concurrent.futures会以子进程的形式，平行的运行多个python解释器，从而令python程序可以利用多核CPU来提升执行速度。由于子进程与主解释器相分离，所以他们的全局解释器锁也是相互独立的。每个子进程都能够完整的使用一个CPU内核。

转载于:https://www.cnblogs.com/jinhh/p/10444804.html