python学习—Day45—消息队列

最新推荐文章于 2024-08-01 19:40:56 发布

原创最新推荐文章于 2024-08-01 19:40:56 发布 · 233 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#python #编程语言

python学习专栏收录该内容

44 篇文章

订阅专栏

本文介绍消息队列的概念及其实现方式，包括通过multiprocessing模块中的Queue和Pipe进行进程间通信的具体示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

消息队列：

消息队列是在消息传输过程中保存消息的容器。

消息队列最经典的用法就是消费者和生产者之间通过消息管道来传递消息，消费者和生产者是不通的进程。生产者往管道中写消息，消费者从管道中读消息。

操作系统提供了很多机制来实现进程间的通信，multiprocessing模块就提供了Queue和pipe两种方法来实现。

#@File :queue_demo1.py
from multiprocessing import Queue, Process


def write(q):
    for i in ['a', 'b', 'c', 'd']:
        q.put(i)
        print("put {0} to queue".format(i))

def read(q):
    while 1:
        result = q.get()
        print("get {0} from queue".format(result))

def main():
    q = Queue()
    pw = Process(target=write, args=(q,))
    pr = Process(target=read, args=(q,))
    pw.start()
    pr.start()
    pw.join()
    pr.terminate()      #当join执行完成，这里就结束。

if __name__ == "__main__":
    main()

put a to queue
get a from queue
put b to queue
get b from queue
put c to queue
get c from queue
put d to queue
get d from queue

通过mutiprocess里面的pipe来实现消息队列：

Pipe方法返回（conn1, conn2）代表一个管道的两个端。Pipe方法有duplex参数，如果duplex参数为True（默认值），那么这个管道是全双工模式，也就是说conn1和conn2均可收发。duplex为False，conn1只负责接受消息，conn2只负责发送消息。

send和recv方法分别是发送和接受消息的方法，close方法表示关闭管道，当接受结束以后，关闭管道。

#@File :pipe_demo1.py
from multiprocessing import Pipe, Process

import time


def proc1(pipe):
    for i in xrange(1, 10):
        pipe.send(i)
        print("send {0} to pipe".format(i))
        time.sleep(1)
        print("#################   one time    ##########")

def proc2(pipe):
    n = 9
    while n>0:
        result = pipe.recv()
        print("recv {0} from pipe".format(result))
        n -= 1

def main():
    pipe = Pipe(duplex=False)
    print(type(pipe))
    p1 = Process(target=proc1, args=(pipe[1],))
    p2 = Process(target=proc2, args=(pipe[0],))
    p1.start()
    p2.start()
    p1.join()
    p2.join()
    pipe[0].close()
    pipe[1].close()
if __name__ == "__main__":
    main()

<type 'tuple'>
send 1 to pipe
recv 1 from pipe
################# one time ##########
send 2 to pipe
recv 2 from pipe
################# one time ##########
send 3 to piperecv 3 from pipe

################# one time ##########
send 4 to pipe
recv 4 from pipe
################# one time ##########
send 5 to pipe
recv 5 from pipe
################# one time ##########
send 6 to pipe
recv 6 from pipe
################# one time ##########
send 7 to pipe
recv 7 from pipe
################# one time ##########
send 8 to pipe
recv 8 from pipe
################# one time ##########
send 9 to pipe
recv 9 from pipe
################# one time ##########