why? subprocess.check_output() module object has out attribute 'check_output'

最新推荐文章于 2023-09-26 11:04:21 发布
转载 最新推荐文章于 2023-09-26 11:04:21 发布 · 1.4k 阅读 · 0

本文探讨了在Python中使用subprocess模块时遇到的问题，特别是当尝试在Python 2.6.7环境中运行hadoop命令时出现的AttributeError。文章提供了详细的解决方案，包括如何使用Popen和communicate方法来代替check_output。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1. why?



















v = subprocess.check_output("ls")

and it works fine. However, when I SSH into a machine and I want to perform a hadoop command,

v = subprocess.check_output("hadoop fs -ls /path/to/file* | grep -oE '/(.*)'")

I get

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
AttributeError: 'module' object has no attribute 'check_output'

Not quite sure why. I think it might be my lack of understanding of subprocess. How can i fix this error?

python  hadoop
share improve this question what version of python on the remote machine?  –  Padraic Cunningham   Nov 12 '14 at 18:37
  • @PadraicCunningham 2.6.7 –  Liondancer  Nov 12 '14 at 18:37

2 Answers

up vote 16 down vote accepted

check_output was introduced in python 2.7 so won't work for < 2.7.

You can use Popen with communicate to get the output.

from subprocess import PIPE,Popen
proc = Popen(['ls', '-l'], stdout=PIPE)
print(proc.communicate()[0].split())

This part of the docs may be useful

python错误：AttributeError: ‘module‘ object has no attribute ‘xxxxx‘，10种总结（成功解决）
左手の明天的博客
08-31 3万+
在使用python过程中是不是经常遇到这个问题：AttributeError: 'module' object has no attribute 'xxxxx'。我最近在使用python过程中也遇到了激光这样的问题，在这里我就这个问题总结最常出现的以下几种情况： 情况一：AttributeError: module ‘cv2’ has no attribute ‘CV_HAAR_SCALE_IMAGE’ ...
YOLO报错： return subprocess.check_output(s, shell=True, stderr=subprocess.STDOUT).decode()[:-1]Unic
qq_53545309的博客
07-24 352
如果子进程输出的是二进制数据（例如，一些命令行工具的输出），而不是文本数据，那么尝试用UTF-8解码这些数据将会导致错误。这个错误通常发生在尝试将字节序列解码为字符串时，但字节序列中包含了无法用指定的编码（这里是UTF-8）解码的字节。这通常发生在尝试解码非UTF-8编码的数据时，例如二进制数据或者错误的编码格式。：在某些情况下，系统的默认编码可能不是UTF-8，或者Python环境配置有问题，导致无法正确解码。函数调用了某个命令行工具，而该工具的输出包含了非标准编码的字符，也可能导致这个问题。
python报错:module ‘subprocess‘ has no attribute ‘check_ouput‘
Mikumiku339的博客
11-13 1653
python报错:module 'subprocess' has no attribute 'check_ouput'原因解决方案 原因 遇到这个错误，说明所用的python版本中该api已舍弃 解决方案 import subprocess #data = subprocess.check_ouput(xxxxxx) #用下面的代码替换上面的 别忘记加capture_output用来捕获输出 data = subprocess.run(xxxxxxx,capture_output = True).stdo
pyspark 检测任务输出目录是否空，避免读取报错
三劫散仙
09-26 831
在跑调度任务时候，有时候子任务需要依赖前置任务的输出，但类似读取 Parquet 或者 Orc 文件时，如果不判断目录是否为空，在输出为空时会报错，所以需要 check 一下，此外Hadoop通常在写入数据时会在目录中生成一个名为_SUCCESS的文件来表示写入操作已成功完成，我们在检测时要排除这个文件。
python报错AttributeError: ‘str‘ object has no attribute ‘items‘的解决办法
weixin_42167089的博客
10-30 3万+
1、报错代码和截图 2、原因：因为我读取的是excel里的数据，excel读取的数据是 str 类型，所以需将str类型转化为 dict类型 通过eval()进行转化，修改后就正常了，以下为修改后代码： ...
知识笔记 - mitmproxy安装报错 | ERROR: Failed building wheel for urwid
m0_51159233的博客
08-15 1126
mitmproxy安装时遇到的错误
遇到问题---python调用shell脚本时subprocess.check_call不阻塞
直到世界的尽头
08-19 7535
转载请注明出处:遇到问题—python调用shell脚本时subprocess.check_call不阻塞 遇到的问题 使用命令 subprocess.check_call(cmd, shell=True, stdout=subprocess.PIPE, stderr=subprocess.STDOUT) 在ubuntu系统中 python中使用subprocess.check...
【深入subprocess模块】subprocess.check_output()细节：捕获命令输出
[【深入subprocess模块】subprocess.check_output()细节：捕获命令输出](https://www.askpython.com/wp-content/uploads/2021/02/Python-subprocess-module-1024x512.png) # 1. subprocess.check_output()基础 ## ...
subprocess.call和subprocess.check_output的区别
04-20
subprocess.call是用于执行外部程序的Python命令，而subprocess.check_output是在执行外部程序时获取其输出。subprocess.call返回程序的退出状态码，而subprocess.check_output返回程序的标准输出。
python打包成exe脚本后subprocess.check_output无法执行下去，卡住了回车两次又执行下去了。
06-14
可以尝试在`subprocess.check_output`中添加`timeout`参数来等待子进程的输出完成，例如： ``` subprocess.check_output(cmd, stderr=subprocess.STDOUT, timeout=10, shell=True) ``` 上述代码中的`timeout`参数...
Tensorflow报错：AttributeError: 'module' object has no attribute 'summary'
lanyuxuan100的博客
05-12 1万+
这是因为API的版本不对，导致AttributeError: ‘module’ object has no attribute ‘summary’. 想想并没有修改什么，只是服务器被重装了驱动，会不会是这个原因呢？ 对了，同事说在服务器上装了tensorflow 0.8！！！ 我原来使用的是1.0版本，真是天煞的，装也不打个招呼，真是气人啊。 于是自己重装了tensorflow，使用如下方法
Python报错AttributeError: ‘module’ object has no attribute’xxx’解决方法
唯有努力无限，才可突破极限
04-20 6万+
# doctest.py class Dict(dict): ''' Simple dict but also support access as x.y style. &gt;&gt;&gt; d1 = Dict() &gt;&gt;&gt; d1['x'] = 100 &gt;&gt;&gt; d1.x 100 &gt;&gt;&gt;...
成功解决AttributeError: ‘str‘ object has no attribute ‘decode‘
热门推荐
头部AI社区如有邀博主AI主题演讲请私信—心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，专注，谦虚，自律，反思，成长，还算比较正能量的博主，公益免费传播…内心特别想在AI界做出一些可以推进历史进程影响力的技术(兴趣使然，有点小情怀，也有点使命感呀
08-26 25万+
​ 成功解决AttributeError: 'str' object has no attribute 'decode' 目录 解决问题 解决思路 解决方法 解决问题 AttributeError: 'str' object has no attribute 'decode' 解决思路 根据问题提示，意思是，属性错误:“str”对象没有属性“decode” 在Python中，AttributeError: 'str' object has no attribute 'decod
ImportError: 'module' object has no attribute 'check_specifier'
gs80140的专栏
08-19 3978
解决办法sudo pip install --upgrade setuptools==30.1.0 ERROR: Command errored out with exit status 1: command: /usr/bin/python2 -c 'import sys, setuptools, tokenize; sys.argv[0] = '"'"'/tmp/pip-...
解决：python编程中AttributeError: 'str' object has no attribute 'sleep'
春风化雨
05-13 1万+
python编程，使用time.sleep(10)挂起线程时候，常见如下异常：time无sleep函数 解决方案： 方案一： 将from time import换成 import time 方案二： 检查是否有定义名称为time的变量，如有换位其他名称，避免重复。 ...
Python 【精】AttributeError: 'Module' object has no attribute 'STARTF_USESHOWINDOW'...
weixin_34221073的博客
04-06 352
夫学须志也，才须学也，非学无以广才，非志无以成学。——诸葛亮 生活有度，自得慈铭 ——杜锦阳 今天新来的小弟安装环境遇到个莫名其妙的问题： AttributeError: 'Module' object has no attribute 'STARTF_USESHOWINDOW' 其它小伙伴好像都没遇...
AttributeError: 'module' object has no attribute 'Path'解决方法
CAnCErWu的博客
05-19 1万+
AttributeError: 'module' object has no attribute 'Path' 解决方法 原因：python对大小写敏感，Path和path代表不同的变量。 解决方法：将Path改为path即可。
Python脚本报错：AttributeError:'model' object has no attribute 'XXX'解决方法
songchunxiao1991的博客
10-17 4万+
错误举例： 错位原因定位： 查看import库的源文件，发现源文件存在且没有错误，同时存在源文件的.pyc文件 解决方法： 1、命名py脚本时，不要与python预留字，模块名等相同 例如：模块是ssl，请不要命名ssl.py文件，因为代码运行时会对应生成.pyc文件。 2、删除该库的.pyc文件 因为代码运行时，会选择走.pyc文件，所以要删除.pyc（最好的方法是1，本身...
subprocess.check_output函数
最新发布
08-20
<think>我们被要求使用中文回答，并且要生成相关问题。同时，要注意引用的使用。 用户的问题：我想了解subprocess.check_output函数的使用方法 请问Python subprocess.check_output 函数用法及示例 根据提供的引用，我们可以总结如下： 1. subprocess.check_output() 函数用于执行shell命令并返回命令的输出。 2. 默认情况下，返回的是字节串（bytes），需要解码成字符串（例如使用decode('utf-8')）。 3. 可以设置参数`shell=True`来执行字符串形式的命令（注意安全风险），或者使用列表形式传递命令和参数（此时shell=False，也是推荐的方式）。 4. 如果命令执行返回非零退出状态，会抛出CalledProcessError异常。 回答结构： 1. 介绍函数作用 2. 基本用法和参数说明 3. 返回值处理（字节转字符串） 4. 异常处理 5. 示例（多个示例，包括引用中的示例和补充示例） 同时，根据引用[4]，我们了解到新版本中可以通过设置`text=True`（或`universal_newlines=True`）来直接返回字符串，避免手动解码。 生成相关问题： 1. 如何处理subprocess.check_output的异常？ 2. subprocess.check_output与subprocess.run有什么区别？ 3. 在Windows和Linux下使用subprocess.check_output有什么不同？ 4. 如何安全地使用shell=True参数？ 注意：在回答中引用站内引用时，在末尾添加引用标识。</think>### Python subprocess.check_output 函数详解 `subprocess.check_output()` 是 Python 标准库中用于执行外部命令并捕获其输出的核心函数。与 `subprocess.call()` 不同，它能将命令执行结果直接赋值给变量，适合需要处理命令输出的场景[^2][^3]。 #### 核心特性 1. **返回值**：默认返回 `bytes` 类型数据（需手动解码为字符串） 2. **错误处理**：命令执行失败时抛出 `CalledProcessError` 异常 3. **参数格式**： - 列表形式：`["命令", "参数1", "参数2"]` - 字符串形式：需设置 `shell=True`（有安全风险） #### 基础用法 ```python import subprocess # 执行简单命令（推荐列表形式） output = subprocess.check_output(["ls", "-l"]) # 字节类型输出 print(output.decode("utf-8")) # 转换为字符串 ``` #### 进阶用法 ```python # 1. 直接获取字符串输出（Python 3.7+） text_output = subprocess.check_output("date", text=True, encoding="utf-8") # 2. 处理管道命令（需shell=True） cmd = "kubectl get nodes | grep Ready | awk '{print $1}'" nodes = subprocess.check_output(cmd, shell=True).decode().strip() # 3. 错误捕获 try: subprocess.check_output(["invalid_cmd"]) except subprocess.CalledProcessError as e: print(f"命令失败! 退出码: {e.returncode}, 输出: {e.output.decode()}") ``` #### 重要参数说明 | **参数** | **作用** | **示例** | |----------------|---------------------------------------|-----------------------------------| | `shell` | 是否通过系统shell执行 | `shell=True` 允许管道操作 | | `text`/`encoding` | 自动解码输出 | `text=True, encoding="utf-8"` | | `stderr` | 错误输出处理 | `stderr=subprocess.STDOUT` 合并输出 | | `timeout` | 执行超时设置(秒) | `timeout=30` | > **安全提示**：使用 `shell=True` 时需严格过滤用户输入，避免命令注入风险。推荐优先使用列表参数格式[^3][^4]。 #### 实际应用场景 1. **系统管理**：获取硬件信息 ```python memory = subprocess.check_output(["free", "-h"], text=True) ``` 2. **数据处理**：调用外部工具 ```python csv_data = subprocess.check_output(["awk", "-F,", "{print $1}", "data.csv"]) ``` 3. **云平台操作**：Kubernetes 节点管理[^3] ```python # 获取节点名称 node_name = subprocess.check_output( "kubectl get nodes | grep test2 | awk '{print $1}'", shell=True ).decode().strip() # 标记节点 subprocess.call(["kubectl", "label", "nodes", node_name, "node-role.kubernetes.io/node="]) ``` #### 常见问题解决 1. **解码错误**：指定正确编码 ```python output = subprocess.check_output(cmd, encoding="latin1") # 处理特殊字符 ``` 2. **混合输出**：合并标准错误和标准输出 ```python output = subprocess.check_output(cmd, stderr=subprocess.STDOUT) ``` 3. **超时控制**：防止进程卡死 ```python try: result = subprocess.check_output(["ping", "host"], timeout=10) except subprocess.TimeoutExpired: print("命令执行超时") ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值