Python 3 利用 subprocess 实现管道( pipe )交互操作读/写通信

最新推荐文章于 2025-02-23 16:29:24 发布

AI算法网奇

最新推荐文章于 2025-02-23 16:29:24 发布

阅读量5.5k

点赞数

CC 4.0 BY-SA版权

分类专栏： python宝典

本文链接：https://blog.youkuaiyun.com/jacke121/article/details/76498403

python宝典专栏收录该内容

1174 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何在Python 3中利用subprocess模块创建管道（pipe）进行进程间的读/写通信。通过封装Pipe，可以设置不同的反馈函数，如退出反馈、就绪反馈和输出反馈，实现进程间高效的数据传递。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

http://www.cnblogs.com/suwings/p/6216279.html

#run.py

from subprocess import *
import threading
import time

p =Popen('ping 127.0.0.1',shell=True,stdin=PIPE

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

AI算法网奇

关注关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

Python 3 利用 subprocess 实现管道交互操作读写通信

03-24

1133

在上述代码中，我们首先使用 subprocess.Popen() 方法启动了一个子进程，该子进程执行了命令“ls -l”。我们将标准输出重定向到了一个管道中，以便我们可以在父进程中读取子进程的输出。在这段代码中，我们启动了一个 grep 子进程，该子进程将所有包含“foo”的行打印出来。我们向该子进程的标准输入中写入了一行“hello foo”，然后从子进程的标准输出中读取了数据，并打印了该数据。除了从子进程的标准输出中读取数据外，我们还可以向子进程的标准输入中写入数据。

python subprocess pipe_python subprocess pipe 实时输出日志的操作

weixin_39619478的博客

01-13

343

* test11.pyimport timeprint "1"time.sleep(2)print "1"time.sleep(2)print "1"time.sleep(2)print "1"* test.pyimport subprocessp = subprocess.Popen("python test11.py", shell=True, stdout=subprocess.PIPE)#...

参与评论您还未登录，请先登录后发表或查看评论

python类库31[进程subprocess与管道pipe]

weixin_34355559的博客

03-06

821

修改自：原文 : Working with Python subprocess - Shells, Processes, Streams, Pipes, Redirects and More 地址 : http://jimmyg.org/blog/2009/working-with-python-subprocess.html 一程序的stdin，stdout，stderr+...

python - 系统交互操作(subprocess)

dixian4894的博客

09-17

540

本文摘于云游道士链接:https://www.cnblogs.com/yyds/p/7288916.html 个人简化,便于查询. 命令行指令的执行通常有两个比较关注的结果：命令执行的状态码--表示命令执行是否成功命令执行的输出结果--命令执行成功后的输出早期的Python版本中，主要是通过os.system()、os.popen().read()等函数来...

python数据管道_Python 3写入管道

weixin_39637260的博客

12-08

170

I'm trying to write some code to put data into a pipe, and I'd like the solution to be python 2.6+ and 3.x compatible.Example:from __future__ import print_functionimport subprocessimport sysif(sys.ver...

python v3.3.2中使用subprocess模块与其它程序进行管道通信

vs9841

10-19

2514

下面是python脚本sup.py： import subprocess p = subprocess.Popen("test.exe", stdin = subprocess.PIPE,stdout = subprocess.PIPE, stderr = subprocess.PIPE, universal_newlines=True,shell = False) p.stdin.w

python subprocess模块

好习惯成就伟大

05-14

2027

一、subprocess以及常用的封装函数运行python的时候，我们都是在创建并运行一个进程。像Linux进程那样，一个进程可以fork一个子进程，并让这个子进程exec另外一个程序。在Python中，我们通过标准库中的subprocess包来fork一个子进程，并运行一个外部的程序。 subprocess包中定义有数个创建子进程的函数，这些函数分别以不同的方式创建子进程，所以我们可以根据需要来从中选取一个使用。另外subprocess还提供了一些管理标准流(standard stream)和管道(pi

python调用其他程序并控制输入输出_python调用外部子进程，通过管道实现异步标准输入和输出的交互...

weixin_39706861的博客

11-21

460

我们通常会遇到这样的需求：通过C++或其他较底层的语言实现了一个复杂的功能模块，需要搭建一个基于Web的Demo，方法查询数据。由于Python语言的强大和简洁，其用来搭建Demo非常合适，Flask框架和jinja2模块功能为python提供了方便的web开发能力。同时，python能够很方便的同其他语言的代码交互。因此我们选择python作为开发Demo的工具。假设我们需要调用的模块（提供底层...

python调用pipe_在python中正确使用subprocess.PIPE？

weixin_40003451的博客

12-04

646

我试图使用subprocess.Popen来构建一个序列来获取视频文件的持续时间.我一直在寻找3天,在网上找不到任何原因,为什么这段代码不工作,但它不断给我一个空白的结果：import sysimport osimport subprocessdef main():the_file = "/Volumes/Footage/Acura/MDX/2001/Crash Test/01 Acura MDX...

【python3】多进程数据交互（pipe管道）

jn10010537的博客

05-08

1286

管道很形象：如同管子，有两端（比如左端，右端），一段流入，另一端就流出。即管道在信息传输上是以流的方式传输，也就是你从A进程不断的写入，B进程源源不断的读出，A进程先写入的就会被B进程先读出，后写进来的就会被后读出。管道也是在内存中开辟一个新的空间，达到多个进程（以及线程）的数据通信。多进程下的管道数据交互示例如下： import multiprocessing def send(arg, Left_end): print(">>>send arg:%s"%ar

3.Linux中的输入输出管理

dizijianga的博客

10-10

260

一.输入输出 1.字符设备显示字符到屏幕上的设备文件 2.stdin 标准输入标号0 键盘鼠标打字机 3.stdout 标准正确输出标号1 4.stderr 标准错误输出标号2 二.如何管理输入外界传递到程序中的信息 1）< 输入重定向 tr ‘a-z’ ‘A-Z’ < test 把test文件中的内容定向到tr程序中 2）<< 多行录入 tr ‘a-z’ ‘A-Z’ << OP test 此处的test不能表示为文件名称只表示test字符 test1

第二十三篇 subprocess模块 python交互linux系统,进程和管道输入输出用法

爱跳水的温文尔雅的laughing

10-19

1375

心得: 愿生命中的每一次相遇都应该去珍惜,我愿用更优秀的自己去迎接未来的你~ subprocess模块: 在linux系统中,subprocess模块可以帮助我们生成子进程,并可以通过管道来连接他们的输入输出,并获取返回值,进而达到通信.这么模块有意取代os模块. 来看看os模块的通信功能: 1 os.system() 直接运行shell command,进行交互 import os >&g...

python3 进程间的通信(管道)Pipe

ddxr5515的博客

06-06

652

Python之subprocess模块

2501_90212852的博客

02-23

515

模块用于创建和管理子进程。通过它，可以在Python脚本中执行外部命令或程序。常见的用法包括：执行Shell命令。获取命令的输出。控制命令的输入、输出和错误流。管道是一种进程间通信机制，用于将一个进程的输出传递给另一个进程的输入。在subprocess模块中，可以通过设置stdout=PIPE将命令的输出重定向到管道，从而在Python中捕获并处理命令的输出。

python 管道持续读写,python3 管道流操作

weixin_31715171的博客

03-25

652

参考链接：平时对于文本处理，可以选择sed,grep ，复杂一点awk ,再复杂一些哟Python. python 和linux 一样，也可以支持单行命令来操作！格式：python -c ## -c cmd : program passed in as string (terminates option list)## terminates option list 表示 -c 之后的其它选项不起作...

Python3中redis模块学习之管道操作

爱喝水的qdy的博客

12-14

361

目录管道使用管道 redis默认在执行每次请求都会创建（连接池申请链接）和断开（归还连接池）一次连接操作，如果想要在一次请求中指定多个命令，则可以使用pipline实现一次请求指定多个命令，并且默认情况下，一次pipline是原子性操作。使用 #!/usr/bin/python3 # -*- coding: utf-8 -*- """管道 """ import redis poo...

Python的subprocess子进程和管道进行交互

weixin_30896511的博客

04-08

180

在很久以前，我写了一个系列，Python和C和C++的交互，如下 http://blog.youkuaiyun.com/marising/archive/2008/08/28/2845339.aspx 目的是解决Python和C/C++的互操作性的问题，假如性能瓶颈的地方用C来写，而一些外围工作用Python来完成，岂不是完美的结合。今天发现了更方便的方式，就是用subprocess模块，...

python3管道通信demo(windows)

平凡者的专栏

08-22

672

【代码】python3管道通信demo(windows)

Python3-实现网络通信，客户端调用服务端的系统命令ipconfig（Socket/Subprocess）

xianjie0318的博客

07-05

1214

Python3 提供了两个级别访问的网络服务。：低级别的网络服务支持基本的 Socket，它提供了标准的 BSD Sockets API，可以访问底层操作系统Socket接口的全部方法。高级别的网络服务模块 SocketServer，它提供了服务器中心类，可以简化网络服务器的开发。这里只介绍简单的网络服务Socket： Socket又称"套接字"，应用程序通常通过"套接字"向网络发出请求或者应答网络请求，使主机间或者一台计算机上的进程间可以通讯。 socket常用的方法函数描述

python中的subprocess.PIPE

最新发布

05-15

<think>好的，我现在需要帮助用户了解Python中subprocess.PIPE的用法和含义。首先，我得回忆一下subprocess模块的基础知识。subprocess模块主要用于创建新的进程，并连接它们的输入/输出管道，获取返回码等。用户提到了subprocess.PIPE，这说明他们可能遇到了需要处理子进程输入输出流的情况。首先，我应该解释subprocess.PIPE的基本概念。PIPE是一个特殊值，可以传递给stdin、stdout或stderr参数，用于创建标准流之间的管道。当使用PIPE时，父进程可以通过这些管道与子进程通信。例如，如果设置stdout=subprocess.PIPE，那么子进程的标准输出会被重定向到父进程的一个管道中，父进程可以读取这个管道的内容。接下来，我需要考虑用户可能的实际应用场景。比如，用户可能需要运行一个外部命令并捕获其输出，或者同时向子进程发送输入并读取输出。这时候，PIPE的作用就体现出来了。需要举一些具体的例子，比如使用subprocess.run()或者subprocess.Popen()来展示如何用PIPE捕获输出或错误流。用户可能还不太清楚PIPE与其他参数（比如直接指定文件对象）的区别。比如，使用PIPE与将stdout指向一个文件有何不同。这时候需要说明PIPE是在内存中创建管道，而文件则是将输出写入磁盘。此外，还要提到使用PIPE时需要注意死锁的问题，比如当输出量很大时，如果没有及时读取可能会导致程序阻塞。另外，用户的问题中提到了引用的内容，引用[1]提到subprocess模块比旧函数更强大，建议使用它。因此，在回答中可以强调使用subprocess模块代替旧的os.system或commands模块的好处，比如更灵活的控制和更安全的进程管理。还要注意用户之前的尝试，比如在命令中使用输出重定向符号导致错误，如引用[2]中的问题。这可能是因为用户试图在subprocess调用中使用shell语法，但参数传递不正确。这时候需要提醒用户正确使用subprocess的参数，比如将命令和参数作为列表传递，而不是依赖shell的重定向。同时，说明使用PIPE可以在代码内部处理输入输出，避免依赖shell的特性，提高跨平台兼容性。可能用户还不太明白如何同时处理标准输出和标准错误，这时候需要举例说明如何设置stderr=subprocess.STDOUT来合并输出，或者分别捕获stdout和stderr的PIPE。同时，需要提到communicate()方法的作用，它可以一次读取所有输出并等待子进程结束，避免手动读取时的死锁问题。最后，考虑到用户可能需要进阶的使用方法，比如实时处理输出流而非一次性获取，这时候可以介绍使用Popen和循环读取stdout的方式，同时处理超时等情况。但也要警告用户如果不当使用可能导致的问题，比如缓冲区填满导致的阻塞。总结一下，回答的结构应该包括：PIPE的定义和用途，基本用法示例，常见应用场景，注意事项（如死锁），与其他方法的对比（如文件重定向），以及相关问题的生成。需要确保使用正确的中文术语，代码示例要符合格式要求，使用行内数学表达式和独立公式时遵循指定格式，但在这个问题中可能用不上数学公式。引用部分要自然融入，比如提到subprocess模块的优势时引用[^1]，处理参数错误时引用[^2]。</think>### Python subprocess.PIPE用法详解 **subprocess.PIPE核心作用**：创建父子进程间的通信管道，实现以下功能： 1. 捕获子进程的输出流（stdout/stderr） 2. 向子进程发送输入数据（stdin） 3. 实现进程间实时数据交互 #### 一、基础用法示例 ```python import subprocess # 捕获输出示例 result = subprocess.run( ['ls', '-l'], stdout=subprocess.PIPE, # ← 关键参数 text=True ) print(result.stdout) # 输出目录列表 # 输入输出交互示例 with subprocess.Popen( ['grep', 'python'], stdin=subprocess.PIPE, stdout=subprocess.PIPE, text=True ) as proc: output, _ = proc.communicate('java\npython\nc++\n') print(output) # 输出：python ``` #### 二、关键特性说明 1. **内存缓冲区**：PIPE使用内存缓冲区而非物理文件，适合中小数据量[^1] 2. **流式处理**：支持实时逐行读取（使用`proc.stdout.readline()`） 3. **同步控制**：`communicate()`方法自动等待进程结束 #### 三、典型应用场景 1. **日志捕获**：替代命令行重定向`>`，实现程序内日志处理 ```python # 代替 `command >> log.txt 2>&1` with open('log.txt', 'a') as f: subprocess.run(['python', 'script.py'], stdout=f, stderr=subprocess.STDOUT) ``` 2. **命令管道模拟**：实现类似`ps aux | grep python`的功能 ```python ps = subprocess.Popen(['ps', 'aux'], stdout=subprocess.PIPE) grep = subprocess.Popen(['grep', 'python'], stdin=ps.stdout, stdout=subprocess.PIPE) ps.stdout.close() # 确保ps在grep退出时能收到SIGPIPE output = grep.communicate()[0] ``` #### 四、注意事项 1. **死锁预防**：当数据量超过管道缓冲区大小时，未及时读取会导致阻塞 ```python # 错误示例（可能死锁） p = subprocess.Popen(...) p.wait() # 先等待进程结束 output = p.stdout.read() # 此时缓冲区可能已满 # 正确做法 output, error = p.communicate() ``` 2. **性能优化**：大数据量时建议使用临时文件 ```python with tempfile.TemporaryFile() as f: subprocess.run(['dd', 'if=/dev/urandom'], stdout=f) ``` #### 五、与重定向符号的对比 | 方式 | 优点 | 缺点 | |-------------------|--------------------------|--------------------------| | subprocess.PIPE | 程序内可控，无需文件操作 | 内存消耗大，易死锁 | | Shell重定向(>>) | 简单直观 | 依赖shell环境，易出错[^2]|