解决daemonic processes are not allowed to have children

最新推荐文章于 2024-09-18 17:52:06 发布

原创最新推荐文章于 2024-09-18 17:52:06 发布 · 3.7k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#python #billiard

文章讨论了在使用Python的multiprocessing时遇到的守护进程不允许有子进程的问题，提供了将Pool实现从multiprocessing切换到billiard.pool以解决此问题的方法。

部署运行你感兴趣的模型镜像

问题大意：守护进程不允许有子进程
问题产生的场景：我的一个后台进程调用了multiprocessing导致的

# 原写法
from multiprocessing import Pool
pool = Pool(processes=20)
    for n in range(100):
        pool.apply_async(func=func_name, args=(n))
    pool.close()
    pool.join()

报错： daemonic processes are not allowed to have children

# 新写法
from billiard.pool import Pool
pool = Pool(processes=20)
    for n in range(100):
        pool.apply_async(func=func_name, args=(n))
    pool.close()
    pool.join()