提问人:Daryl Spitzer 提问时间:10/3/2008 最后编辑:sshashank124Daryl Spitzer 更新时间:12/9/2021 访问量:430385
如何将字符串传递到子进程中。Popen(使用 stdin 参数)?
How do I pass a string into subprocess.Popen (using the stdin argument)?
问:
如果我执行以下操作:
import subprocess
from cStringIO import StringIO
subprocess.Popen(['grep','f'],stdout=subprocess.PIPE,stdin=StringIO('one\ntwo\nthree\nfour\nfive\nsix\n')).communicate()[0]
我得到:
Traceback (most recent call last):
File "<stdin>", line 1, in ?
File "/build/toolchain/mac32/python-2.4.3/lib/python2.4/subprocess.py", line 533, in __init__
(p2cread, p2cwrite,
File "/build/toolchain/mac32/python-2.4.3/lib/python2.4/subprocess.py", line 830, in _get_handles
p2cread = stdin.fileno()
AttributeError: 'cStringIO.StringI' object has no attribute 'fileno'
显然,cStringIO.StringIO 对象不够接近文件鸭子以适应子进程。噗噗。如何解决此问题?
答:
我想出了这个解决方法:
>>> p = subprocess.Popen(['grep','f'],stdout=subprocess.PIPE,stdin=subprocess.PIPE)
>>> p.stdin.write(b'one\ntwo\nthree\nfour\nfive\nsix\n') #expects a bytes type object
>>> p.communicate()[0]
'four\nfive\n'
>>> p.stdin.close()
有没有更好的?
评论
stdin.write()
p.communicate()
communicate
read()
communicate()
显然,cStringIO.StringIO 对象不够接近 适合子进程的文件鸭子。普彭
恐怕不是。管道是一个低级 OS 概念,因此它绝对需要一个由 OS 级文件描述符表示的文件对象。您的解决方法是正确的。
请注意,如果要将数据发送到 进程的 stdin,您需要 创建 Popen 对象 stdin=管道。同样,要得到任何东西 除了结果元组中的 None, 您需要给出 stdout=PIPE 和/或 stderr=PIPE。
替换 os.popen*
pipe = os.popen(cmd, 'w', bufsize)
# ==>
pipe = Popen(cmd, shell=True, bufsize=bufsize, stdin=PIPE).stdin
警告使用 communicate() 而不是 stdin.write()、stdout.read() 或 stderr.read() 以避免死锁 到任何其他操作系统管道缓冲区 填满并阻止孩子 过程。
因此,您的示例可以写成如下:
from subprocess import Popen, PIPE, STDOUT
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=STDOUT)
grep_stdout = p.communicate(input=b'one\ntwo\nthree\nfour\nfive\nsix\n')[0]
print(grep_stdout.decode())
# -> four
# -> five
# ->
在 Python 3.5+ (3.6+ for ) 上,您可以使用 subprocess.run
将输入作为字符串传递给外部命令并获取其退出状态,并在一次调用中将其输出为字符串:encoding
#!/usr/bin/env python3
from subprocess import run, PIPE
p = run(['grep', 'f'], stdout=PIPE,
input='one\ntwo\nthree\nfour\nfive\nsix\n', encoding='ascii')
print(p.returncode)
# -> 0
print(p.stdout)
# -> four
# -> five
# ->
评论
input
subprocess.run()
p = run(['grep', 'f'], stdout=PIPE, input=some_string.encode('ascii'))
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=STDOUT)
p.stdin.write('one\n')
time.sleep(0.5)
p.stdin.write('two\n')
time.sleep(0.5)
p.stdin.write('three\n')
time.sleep(0.5)
testresult = p.communicate()[0]
time.sleep(0.5)
print(testresult)
评论
from subprocess import Popen, PIPE
from tempfile import SpooledTemporaryFile as tempfile
f = tempfile()
f.write('one\ntwo\nthree\nfour\nfive\nsix\n')
f.seek(0)
print Popen(['/bin/grep','f'],stdout=PIPE,stdin=f).stdout.read()
f.close()
评论
"""
Ex: Dialog (2-way) with a Popen()
"""
p = subprocess.Popen('Your Command Here',
stdout=subprocess.PIPE,
stderr=subprocess.STDOUT,
stdin=PIPE,
shell=True,
bufsize=0)
p.stdin.write('START\n')
out = p.stdout.readline()
while out:
line = out
line = line.rstrip("\n")
if "WHATEVER1" in line:
pr = 1
p.stdin.write('DO 1\n')
out = p.stdout.readline()
continue
if "WHATEVER2" in line:
pr = 2
p.stdin.write('DO 2\n')
out = p.stdout.readline()
continue
"""
..........
"""
out = p.stdout.readline()
p.wait()
评论
shell=True
Popen(['cmd', 'with', 'args'])
Popen('cmd with args', shell=True)
请注意,如果太大,可能会给您带来麻烦,因为显然父进程会在分叉子进程之前对其进行缓冲,这意味着它此时需要“两倍”的内存(至少根据此处找到的“幕后”解释和链接文档)。在我的特殊情况下,是一个生成器,它首先被完全扩展,然后才写入,所以在子进程生成之前,父进程是巨大的,
并且没有留下任何内存来分叉它:Popen.communicate(input=s)
s
s
stdin
File "/opt/local/stow/python-2.7.2/lib/python2.7/subprocess.py", line 1130, in _execute_child
self.pid = os.fork()
OSError: [Errno 12] Cannot allocate memory
我正在使用 python3 并发现您需要先对字符串进行编码,然后才能将其传递到 stdin:
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=PIPE)
out, err = p.communicate(input='one\ntwo\nthree\nfour\nfive\nsix\n'.encode())
print(out)
评论
b'something'
universal_newlines=True
Popen
universal_newlines=True
我有点惊讶没有人建议创建管道,在我看来,这是将字符串传递给子进程的 stdin 的最简单方法:
read, write = os.pipe()
os.write(write, "stdin input here")
os.close(write)
subprocess.check_call(['your-command'], stdin=read)
评论
os
subprocess
如果您使用的是 Python 3.4 或更高版本,则有一个很好的解决方案。使用参数而不是参数,后者接受字节参数:input
stdin
output_bytes = subprocess.check_output(
["sed", "s/foo/bar/"],
input=b"foo",
)
这适用于check_output
和运行
,但由于某种原因不能调用
或check_call
。
在 Python 3.7+ 中,您还可以添加 to make 将字符串作为输入并返回字符串(而不是):text=True
check_output
bytes
output_string = subprocess.check_output(
["sed", "s/foo/bar/"],
input="foo",
text=True,
)
评论
check_output
input
call
check_call
run
run
check_output
communicate
call
check_call
communicate
select
call
check_call
在 Python 3.7+ 上,执行以下操作:
my_data = "whatever you want\nshould match this f"
subprocess.run(["grep", "f"], text=True, input=my_data)
您可能希望添加以获取以字符串形式运行命令的输出。capture_output=True
在旧版本的 Python 上,替换为:text=True
universal_newlines=True
subprocess.run(["grep", "f"], universal_newlines=True, input=my_data)
这对 来说有点矫枉过正,但通过我的旅程,我已经了解了 Linux 命令和 python 库grep
expect
pexpect
import pexpect
child = pexpect.spawn('grep f', timeout=10)
child.sendline('text to match')
print(child.before)
使用交互式 shell 应用程序,就像使用 pexpect 一样微不足道ftp
import pexpect
child = pexpect.spawn ('ftp ftp.openbsd.org')
child.expect ('Name .*: ')
child.sendline ('anonymous')
child.expect ('Password:')
child.sendline ('[email protected]')
child.expect ('ftp> ')
child.sendline ('ls /pub/OpenBSD/')
child.expect ('ftp> ')
print child.before # Print the result of the ls command.
child.interact() # Give control of the child to the user.
评论
call(['ls', '-1'], shell=True)
不正确。我建议改为阅读子进程标签描述中的常见问题。特别是,Why 子进程。当args是sequence时,Popen不起作用?解释了为什么是错误的。我记得在博客文章下发表评论,但由于某种原因我现在没有看到它们。call(['ls', '-1'], shell=True)
subprocess.run