[python]多进程的通信，介绍与使用

最新推荐文章于 2024-11-08 14:29:20 发布

qq_38065133

最新推荐文章于 2024-11-08 14:29:20 发布

阅读量173

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.youkuaiyun.com/qq_38065133/article/details/82814625

本文深入探讨了Python中多进程通信的多种方式，包括使用multiprocessing模块下的Queue、Pipe以及Manager来实现进程间的数据共享和通信。通过具体示例，详细解释了每种通信方式的特点和适用场景。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import time
from multiprocessing import Process,Queue     #要用multiprocessing下面的Queue才可以。同样这个也不能用于多线程通信
#from queue import Queue     #这个是用于多进程的，并不可以用 会报错

# def producer(queue):
#     queue.put("a")
#     time.sleep(2)
#
# def consumer(queue):
#     time.sleep(2)
#     data = queue.get()
#     print(data)
#
# if __name__ == "__main__":
#     queue = Queue(10)
#     my_producer = Process(target=producer, args=(queue,))
#     my_consumer = Process(target=consumer, args=(queue,))
#     my_producer.start()
#     my_consumer.start()
#     my_producer.join()
#     my_consumer.join()

from multiprocessing import Manager
#multiprocessing中的queue不能用于pool进程池
#pool中的进程间通信需要使用manager中的queue

# def producer(queue):
#     queue.put("a")
#     time.sleep(2)
#
# def consumer(queue):
#     time.sleep(2)
#     data = queue.get()
#     print(data)
#
# if __name__ == "__main__":
#     queue = Manager().Queue(10)
#     pool = Pool(2)
#
#     pool.apply_async(producer, args=(queue,))
#     pool.apply_async(consumer, args=(queue,))
#
#     pool.close()
#     pool.join()

from multiprocessing import Pipe
#通过pipe实现进程间通信
#pipe的性能高于queue

# def producer(pipe):
#     pipe.send("bobby")
#
# def consumer(pipe):
#     print(pipe.recv())
#
# if __name__ == "__main__":
#     recevie_pipe, send_pipe = Pipe()
#     #pipe只能适用于两个进程
#     my_producer= Process(target=producer, args=(send_pipe, ))
#     my_consumer = Process(target=consumer, args=(recevie_pipe,))
#
#     my_producer.start()
#     my_consumer.start()
#     my_producer.join()
#     my_consumer.join()

#如果想要实现，像线程一样共同去维护一个变量，可以用Manager下的数据类型
from multiprocessing import Process, Manager
def add_data(p_dict, key, value):
    p_dict[key] = value				#这里实际操作的时候也要注意加Lock， Manager下也是有lock的

if __name__ == "__main__":
    progress_dict = Manager().dict()

    first_progress = Process(target=add_data, args=(progress_dict, "bobby1", 22))
    second_progress = Process(target=add_data, args=(progress_dict, "bobby2", 23))

    first_progress.start()
    second_progress.start()
    first_progress.join()
    second_progress.join()

    print(progress_dict)