11.python并发入门(part8 基于线程队列实现生产者消费者模型)

本文介绍了生产者消费者模型的概念及其实现方式,该模型通过一个队列作为中间缓冲区,解决生产者和消费者线程间的同步问题。文章提供了两个Python示例代码,演示如何使用线程和队列实现这一模型。

一、什么是生产者消费者模型?

生产者就是生产数据的线程,消费者指的就是消费数据的线程。

在多线程开发过程中,生产者的速度比消费者的速度快,那么生产者就必须等待消费者把数据处理完,生产者才会产生新的数据,相对的,如果消费者处理数据的速度大于生产者,那么消费者就必须等待生产者。

为了解决这种问题,就有了生产者消费者模型。


生产者与消费者模型,是通过一个容器,来解决生产者和消费者之间的耦合性问题,生产者和消费者之间并不会直接通信,这样生产者就无需等待消费者处理完数据,生产者可以直接把数据扔给队列,这个时候消费者也无需找生产者要数据,直接去队列中取数据,这个队列,起到的就是一个缓冲区的作用,具有平衡生产者和消费者的处理能力。


二、基于队列的生产者消费者模型的示例。

ver1:

#!/usr/local/bin/python2.7

# -*- coding:utf-8 -*-

import time

import random

import Queue

import threading

q1 = Queue.Queue()

def producer(name):

    count = 0

    while count < 10:

        print  "making..."

        time.sleep(random.randrange(3))

        q1.put(count)

        print "procucer %s has produced %s baozi...." %(name,count)

        count += 1

        print "ok!"

def consumer(name):

    count = 0

    while count < 10:

        time.sleep(random.randrange(4))

        if not q1.empty():

            data = q1.get()

            print data

            print '\033[32;1mConsumer %s has eat %s baozi...\033[0m' %(name, data)

        else:

            print "not fond baozi"

        count += 1

if __name__ == '__main__':

    p1 = threading.Thread(target=producer,args=('A',))

    c1 = threading.Thread(target=consumer,args=('B',))

    p1.start()

    c1.start()


ver2:

#!/usr/local/bin/python2.7

# -*- coding:utf-8 -*-

import time

import random

import Queue

import threading

q1 = Queue.Queue()

def producer(name):

    count = 0

    while count < 10:

        print  "making..."

        time.sleep(random.randrange(3))

        q1.put(count)

        print "procucer %s has produced %s baozi...." %(name,count)

        count += 1

        q1.task_done()  #给队列发个信号,告诉队列put完毕

        #q1.join()

        print "ok!"

def consumer(name):

    count = 0

    while count < 10:

        q1.join() ##监听生产者发送给队列的信号

        time.sleep(random.randrange(4))

       # if not q1.empty():

        data = q1.get()

        #q1.task_done()

        print data

        print '\033[32;1mConsumer %s has eat %s baozi...\033[0m' %(name, data)

        #else:

        #print "not fond baozi"

        count += 1

if __name__ == '__main__':

    p1 = threading.Thread(target=producer,args=('A',))

    c1 = threading.Thread(target=consumer,args=('B',))

    c2 = threading.Thread(target=consumer,args=('C',))

    c3 = threading.Thread(target=consumer,args=('D',))

    p1.start()

    c1.start()

    c2.start()

    c3.start()




      本文转自苏浩智 51CTO博客,原文链接:http://blog.51cto.com/suhaozhi/1925548,如需转载请自行联系原作者




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值