python协程

最新推荐文章于 2025-05-20 22:53:57 发布

原创最新推荐文章于 2025-05-20 22:53:57 发布 · 313 阅读

0 ·

CC 4.0 BY-SA版权

python 专栏收录该内容

31 篇文章

订阅专栏

本文深入探讨了协程的工作原理，对比线程和进程，强调了协程在提高执行效率和简化多任务处理上的优势。并通过greenlet和gevent模块的实际应用，展示了协程在Python中的高效并发编程技巧。

协程（又称微线程，纤程。英文名Coroutine）：
协助程序，线程和进程都是抢占式特点，线程和进程的切换我们是不能参与的；而协程是非抢占式特点，协程也存在着切换，这种切换是由我们用户来控制的；协程主解决的是IO的操作。
协程的优点
优点1: 协程极高的执行效率。因为子程序切换不是线程切换，而是由程序自身控制，因此，没有线程切换的开销，和多线程比，线程数量越多，协程的性能优势就越明显。
优点2: 不需要多线程的锁机制，因为只有一个线程，也不存在同时写变量冲突，在协程中控制共享资源不加锁，只需要判断状态就好了，所以执行效率比多线程高很多；因为协程是一个线程执行，那怎么利用多核CPU呢？最简单的方法是多进程+协程，既充分利用多核，又充分发挥协程的高效率，可获得极高的性能。
1、greenlet 模块
greenlet是一个用C实现的协程模块，相比与python自带的yield，它可以使你在任意函数之间随意切换，而不需把这个函数先声明为generator
安装：pip3 install greenlet。如果引入的时候还是报错，使用pycharm进行下载安装，
选择 file --> settings --> Project:项目名称 --> Project Interpreter–>…

from greenlet import greenlet
from greenlet import getcurrent
def test1():
    print(12)
    gr2.switch()
    print(34)
    gr2.switch()

def test2():
    print(56)
    gr1.switch()
    print(78)

gr1=greenlet(test1)
gr2=greenlet(test2)

gr1.switch()

2、 gevent模块
使用gevent模块和普通下载进行对比
首先复习一下二进制方法读写下载：

import requests

url='https://b-ssl.duitang.com/uploads/item/201612/10/20161210005234_hZzLn.jpeg'
response=requests.get(url)
# requests.content#获取二进制的2进制图片

with open ('img/2.jpeg',mode='wb')as f:
    f.write(response.content)

普通下载依次下载

import gevent
import requests
def download_img(url,img_name):
    responce=requests.get(url)
    with open('img/'+img_name,mode='wb')as  f:
        f.write(responce.content)

if __name__=='__main__':
    url1='https://b-ssl.duitang.com/uploads/item/201612/10/20161210005234_hZzLn.jpeg'
    url2='https://gss1.bdstatic.com/9vo3dSag_xI4khGkpoWK1HF6hhy.jpg'
    url3='https://timgsa.baidu.com/timg?image&quality=80&size.jpg'
    download_img(url1, 'aaa1.jpeg')
    download_img(url2, 'aaa2.jpeg')
    download_img(url3, 'aaa3.jpeg')

使用gevent模块方法下载

import gevent
import requests
def download_img(url,img_name):
    responce=requests.get(url)
    with open('img/'+img_name,mode='wb')as  f:
        f.write(responce.content)

if __name__=='__main__':
    url1='https://b-ssl.duitang.com/uploads/item/201612/10/20161210005234_hZzLn.jpeg'
    url2='https://gss1.bdstatic.com/9vo3dSag_xI4khGkpoWK1HF6hhy.jpg'
    url3='https://timgsa.baidu.com/timg?image&quality=80&size.jpg'

gevent.joinall([
        gevent.spawn(download_img,url1,'aaa4.jpeg'),
        gevent.spawn(download_img,url2,'aaa5.jpeg'),gevent.spawn(download_img,url3,'aaa6.jpeg')
    ])

通过以上两种方法你会发现gevent模块下载的速度明显快于普通式