python-subprocess

Python subprocess模块详解

一. 引言

   subprocess 是 Python 标准库中用于创建新进程、连接到它们的输入 / 输出 / 错误管道,并获取它们的返回码的模块。它提供了一种灵活的方式来执行系统命令、运行外部程序,并与它们进行交互。

二. 核心功能

   subprocess 模块的主要作用是:

1. 执行外部命令或程序(如系统命令、其他脚本语言程序等)
2. 控制输入 / 输出流(stdin、stdout、stderr)
3. 获取命令执行结果和返回码
4. 管理进程的生命周期

三. 常用方法(功能函数)

1.  subprocess.run()

  python 3.5+ 引入的高级函数,封装了大部分常用功能,适合大多数场景。基本用法:

import subprocess

# 执行简单命令
result = subprocess.run(["ls", "-l"])

# 查看返回结果
print("返回码:", result.returncode)  # 0表示成功,非0表示失败

2. subprocess.Popen

  灵活的底层接口,适合需要复杂交互的场景(如实时输出处理、长时间运行的进程等):

import subprocess

# 创建进程对象
proc = subprocess.Popen(["echo", "Hello World"])

# 等待进程结束
proc.wait()

# 获取返回码
print("返回码:", proc.returncode)

重要参数说明:

参数作用
args要执行的命令,可以是字符串或列表
shell=True是否通过 shell 执行命令(方便使用管道、通配符等,但有安全风险)
stdout/stderr控制输出流,subprocess.PIPE 表示捕获输出,None 表示继承父进程输出
stdin控制输入流,subprocess.PIPE 表示可以通过管道输入数据
text/universal_newlines设为 True 时,输入输出为字符串类型,否则为字节类型
check=True仅用于 run(),命令返回非 0 状态码时抛出 CalledProcessError 异常
cwd设置命令执行的工作目录
timeout超时时间,超过指定时间将终止进程并抛出异常

案例: 

#!/usr/bin/python
import subprocess
p = subprocess.Popen("uptime && pd",stdout=subprocess.PIPE,stderr=subprocess.PIPE,shell=True)
out,err = p.communicate()
print 'out:---%s' % out
print 'err:---%s' % err

 输出: 

out:---b' 16:23:32 up 292 days, 42 min,  4 users,  load average: 0.01, 0.02, 0.00\n'
err:---b'/bin/sh: pd: command not found\n'

Popen的一些功能: 

     a). Popen.poll():检查子进程是否已经结束。设置并返回returncode属性,没有结束返回None

     b). Popen.wait(): 等待子进程终止,设置并返回returncode;这个方法可能导致死锁:如果子进程对stdout/stderr使用的管道产生大量输入,可能填满管道的buffer,这样,子进程就会等待其它人读取 这些buffer(可使用communicate避免)。

     c). Popen.communicate(input=None): 将数据发给子进程的stdin,并从子进程的stdout/stderr读取数据,直到eof。等待子进程结束,返回元组(stdoutdata, stderrdata),注意:读取的数据是存放在内存中的。如果想用这个函数发送数据或者读取数据,创建Popen时需要制定stdin/stdout/stderr为管道(PIPE)

     d). Popen.send_signal(signal): 向子进程发送指定的信号;

     e). Popen.terminate(): 终止子进程,在Unix上,就是向子进程发送SIGTERM.

      f). Popen.kill(): 杀死子进程,在Unix上,就是向子进程发送SIGKILL。

     g). Popen.stdin/Popen.stdout/Popen.stderr: 创建Popen对象时,参数被设置为PIPE,Popen.stdout将返回一个文件对象用于子进程发送指令。否则返回None.

   h).  Popen.pid : 子进程id

     i). Popen.returncode :子进程的返回值,被poll()和wait()设置(communicate()也会设置)。如果返回值是-N,表示子进程是被Unix的信号N杀死的,进程还没有结束,返回None .

关于异常处理: 在子进程中,如果在加载并执行指定的程序之前,抛出了异常,这个异常会在父进程中被重新抛出。例如,常见的一个异常是OSError(没有找到要执行的程序)。这种异常会多一个字段:child_traceback,该字段包含了从子进程观点来看的traceback信息。如果Popen的参数类型不对,Popen也会抛出ValueError异常。

上面一种方式,会阻塞(等待),直到子进程结束后才会返回,不能及时获得stdout,stderr, 可通过下面方式获得:

#!/usr/bin/python
import subprocess
p = subprocess.Popen("uptime && sleep 10 && pd",stdout=subprocess.PIPE,stderr=subprocess.STDOUT,shell=True)
r = p.poll()
while r is None:
    line = p.stdout.readline()
    r = p.poll()
    line = line.strip()
    print line

3. 一些对subprocess.Popen封装的功能: 

 a).  subprocess.call(args*stdin=Nonestdout=Nonestderr=Noneshell=False):

   父进程等待子进程完成,返回退出信息(returncode,相当于exit code)

b).   subprocess.check_call(args*stdin=Nonestdout=Nonestderr=Noneshell=False):

   父进程等待子进程完成返回0, 检查退出信息,如果returncode不为0,则举出错误subprocess.CalledProcessError,该对象包含有returncode属 性,可用try...except...来检查.

c). subprocess.check_output(args*stdin=Nonestderr=Noneshell=Falseuniversal_newlines=False):

     父进程等待子进程完成,返回子进程向标准输出的输出结果.检查退出信息,如果returncode不为0,则举出错误subprocess.CalledProcessError,该对象包含有returncode属性和output属性,output属性为标准输出的输出结果,可用try...except...来检查。

-  --------------------------------------------------------------------------------------------------------------------------

                         深耕运维行业多年,擅长运维体系建设,方案落地。欢迎交流!

                                                     “V-x”: ywjw996

                                                     《 运维经纬 》


 

### 回答1: Python 3.9是一种非常强大的编程语言,具有很多优点,例如易学易用、代码简洁、模块化设计等等。但是,在安装一些看似简单的扩展模块时,有时会遇到错误。本文将介绍如何解决安装Python-ldap subprocess-exited-with-error错误的方法。 Python-ldap 是Python的一个开放源代码的扩展库,用于与LDAP(Lightweight Directory Access Protocol)进行通信。Python-ldap扩展需要在Python环境中安装OpenLDAP开发包。这时,有可能会在安装过程中遇到“subprocess-exited-with-error”错误。这是Python-ldap扩展的一个常见错误,但并不难解决。下面是几个可能的解决方案: 1. 确保安装OpenLDAP开发包 在安装Python-ldap之前,必须确保已经按照当前操作系统的要求安装了OpenLDAP开发包。OpenLDAP是一个基于X.500标准的开放源代码目录服务,可以用于LDAP协议。在安装OpenLDAP开发包之前,需要检查是否有Linux各种发行版有对应的OpenLDAP包管理工具,如果没有则需要去下载源码从压缩包编译出.so库。 2. 管理员权限 安装Python-ldap时,需要管理员权限才能处理需要的二进制文件。如果没有管理员权限,无法安装这个扩展。在Linux或Mac系统中,可以使用sudo或者su命令获得管理员权限。 3. 安装依赖库 Python-ldap还依赖一些其他的Python库,包括pyasn1和pyasn1-modules。使用命令pip install pyasn1 pyasn1-modules进行安装即可。 4. 安装PyCryptodome 有时候,安装python-ldap时,还需要安装PyCryptodome包。PyCryptodome是一个Python密码库,它采用C扩展方式并提供了一组可用于加密、签名、验证、哈希等操作的模块。使用命令pip install pycryptodome 安装。 总之,“subprocess-exited-with-error”错误的解决办法包括:确保安装OpenLDAP开发包、获得管理员权限、安装依赖库、安装PyCryptodome等等。遇到问题应该及时进行查找,保证Python的正常运行。 ### 回答2: 应该首先查看错误信息,了解安装过程中出现了什么问题。从错误信息中可以了解到是 subprocess-exited-with-error,这个错误信息比较笼统,不能够明确判断出错原因。需要进一步寻找其他信息。可以考虑执行以下命令,检查详细错误信息: ```python pip install python-ldap --global-option=build_ext --global-option="-I/usr/local/opt/openldap/include -L/usr/local/opt/openldap/lib" ``` 执行完上述命令后,自动进入了下载过程,如果命令执行失败,会给出错误信息。根据错误信息检查原因,有可能是python的版本问题,或者缺少相关依赖包。如果因为缺少依赖包无法安装python-ldap 库,则可以按照以下步骤进行安装: 1. 安装OpenLDAP,指定python支持的相关库: ```shell brew install openldap ``` 2. 安装pip: ```shell sudo easy_install pip ``` 3. 安装python-ldap: ```shell pip install python-ldap --global-option=build_ext --global-option="-I/usr/local/opt/openldap/include -L/usr/local/opt/openldap/lib" ``` 以上步骤可以解决在安装python-ldap过程中可能遇到的错误,确保安装成功。当然,如果无法解决错误,可以考虑更换python版本,或者寻找其他途径解决问题。 ### 回答3: Python是一种高级编程语言,它被广泛用于许多应用程序的开发Python 3.9是Python语言的最新版本,并且它包含许多新的功能和改进。安装与Python 3.9相关的软件包时,您可能会遇到一些错误。本文将重点介绍如何安装Python-ldap模块,并解决subprocess-exited-with-error错误。 Python-ldap是一个用于Python编程语言的LDAP(Lightweight Directory Access Protocol)客户端库,它是使用Python连接LDAP服务器的重要工具。想要使用Python-ldap模块,您需要先安装OpenLDAP开发文件。 要在Python 3.9中安装Python-ldap模块,请按照以下步骤进行: 第一步是安装OpenLDAP开发文件: sudo apt-get update sudo apt-get install libldap2-dev libsasl2-dev libssl-dev 第二步是使用PIP安装Python-ldap模块: sudo pip install python-ldap 如果您遇到了subprocess-exited-with-error错误,请按照以下步骤进行解决: 步骤1:安装Python-ldap之前,请确保您已经安装了Python 3.9的开发文件。可以使用以下命令来安装: sudo apt-get install python3.9-dev 步骤2:如果您尝试使用sudo pip install python-ldap命令安装Python-ldap时仍然遇到了subprocess-exited-with-error错误,请使用以下命令: sudo apt-get install python3-ldap 步骤3:如果您无法通过上述方法解决问题,请使用以下命令: sudo apt-get install libsasl2-modules-gssapi-mit 安装完上述三个开发文件之后,请再次尝试使用sudo pip install python-ldap安装Python-ldap模块。您不应该再遇到subprocess-exited-with-error错误。 总而言之,Python-ldap模块是一个非常有用的工具,用于在Python编程语言中连接LDAP服务器。通过遵循以上步骤,您可以轻松地安装它,并解决subprocess-exited-with-error错误。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值