python将子进程的输出抛向黑洞

走错路的程序员

于 2021-05-27 14:04:38 发布

阅读量300

点赞数

CC 4.0 BY-SA版权

分类专栏： python

本文链接：https://blog.youkuaiyun.com/phker/article/details/117327263

python 专栏收录该内容

56 篇文章

订阅专栏

博主在使用visdom进行训练界面监控时遇到界面卡死的问题，经过排查确定问题可能与`subprocess.Popen`的`stdout`设置有关。原来使用`subprocess.PIPE`可能导致缓存堵塞，改用`subprocess.DEVNULL`将输出重定向到黑洞后，问题得到解决，确保了visdom服务的稳定运行。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

最近使用visdom做训练用的界面, 结果发现, 启动服务后一段时间后训练界面总是会无缘无故的卡在某个地方.
后来我用命令行启动的时候却又是好的. 非常的奇怪. 后来我判断应该是跟 subprocess.Popen 有关系.
猜测可能跟stdout有关系, 有可能是PIPE 的缓存塞满了, 所以就卡住了.

后来调试了一下源代码发现还有 subprocess.DEVNULL 可以输出到控. 然后果断换上了. 然后就正常可以使用了.

subprocess.STDOUT
subprocess.PIPE
subprocess.DEVNULL

visdompro = None
@GloabelRouter.route(method='post', url='/api/TrainPytorchDeeplabV3/StartVisDom', auth=False)
def StartVisDom(handler): 
    global visdompro

    cmd = [
        "python.exe",
        "-m",
        "visdom.server",
        "-p", "11251"
    ]
    if(visdompro != None): 
        os.kill(visdompro.pid,9)

    # os.system(" ".join(cmd))

    visdompro = subprocess.Popen(
    # visdompro = os.popen(
                cmd, 
                shell = True, 
                bufsize = 0,        
                stdout=subprocess.DEVNULL, # 这句话之前是  subprocess.PIPE 会阻塞进程
                stderr=subprocess.DEVNULL, # 这句话之前是  subprocess.PIPE  会阻塞进程
            )  

    OutMessage(handler,True,"启动成功,请刷新页面后开始训练.")