python 多进程

最新推荐文章于 2025-04-11 12:05:25 发布

gaonii

最新推荐文章于 2025-04-11 12:05:25 发布

阅读量340

点赞数

文章标签： python 多进程

本文链接：https://blog.youkuaiyun.com/gaonii/article/details/53587100

版权

多进程：

fork：

import os
pid = os.fork()
if pid == 0:         #如果是子进程
    os.getpid()      #获得当前进程id
    os.getppid()     #获得父进程id
else:
    pid              #所产生的子进程id
    os.getpid()      #当前进程id

和linux下的fork函数一样，但是fork不能在windows下使用。

我们可以考虑用multiprocessing模块,multiprocessing模块是跨平台的,但是在windows下创建进程还是会出问题

multiprocessing.Process

from multiprocessing import Process      #multiprocessing模块的Process类
def run_proc(name):
    pass
p = Process(target=run_proc, args=('process_name',))
p.start()
p.join()

还可以通过Pool模块一次性启动大量进程（以进程池的方式

）

multiprocessing.Pool

from multiprocessing import Pool         #multiprocessing模块的Pool类
def long_time_task(name):
    pass
p = Pool(4)                             #默认是当前cpu核数multiprocessing.cpu_count
for i in range(5):                     
    p.apply_async(long_time_task,args=(i,))
 #生成5个进程，由于当前cpu核数为4个，所以只能先一次性生成4个进程，等其中一个运行完了，再生成一个
p.close()                               #不允许再加进程了p.join()

subprocess

import subprocess
print('$ nslookup www.python.org')
r = subprocess.call(['nslookup', 'www.python.org'])
print('Exit code:', r)

生成外部进程（之前的都是父进程生成子进程）

进程通信

很多方法，自己找进程通信库吧，队列、管道、消息、共享内存等等

from multiprocessing import Queue

from multiprocessing import Pipes

。。。

参考：

http://www.liaoxuefeng.com/wiki/0014316089557264a6b348958f449949df42a6d3a2e542c000/001431927781401bb47ccf187b24c3b955157bb12c5882d000