python并发执行远程命令线程不退出问题

最新推荐文章于 2024-12-04 12:39:46 发布

Bcc的笔记

最新推荐文章于 2024-12-04 12:39:46 发布

阅读量524

点赞数

分类专栏： Python笔记

本文链接：https://blog.youkuaiyun.com/weixin_41431016/article/details/113858917

版权

本文探讨了使用multiprocessing Pool.map进行并发执行时遇到的线程不退出问题。问题出在远程命令执行函数（通过subprocess.Popen）的exit()操作，导致线程无法释放，主进程因此被阻塞。解决方案是通过捕获异常并用return替换exit，以优雅地结束线程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

通过multiprocessing 模块的Pool.map实现并发，创建多个工作线程，工作线程调用登录远端执行命令的函数（通过subprocess.Popen实现），但是当代码逻辑执行完成后，线程不释放，主进程就一直等待不退出

代码demo

# 远端执行命令的函数
def remote_shell_opt(ip, cmd):
    # Ports are handled in ~/.ssh/config since we use OpenSSH
    ssh = subprocess.Popen(["/bin/ssh", "%s" % ip, cmd],
    #ssh = subprocess.Popen(["ssh", "%s" % ip, cmd],
                           shell=False,
                           stdout=subprocess.PIPE,
                           stderr=subprocess.<