запуск командной строки, содержащей Pipes и отображение результата в STDOUT - PullRequest
Новая
       10

запуск командной строки, содержащей Pipes и отображение результата в STDOUT

35 голосов
/ 08 сентября 2011

Как можно вызвать команду оболочки из Python, которая содержит канал и захватить вывод?

Предположим, что команда была чем-то вроде: 

cat file.log | tail -1

Эквивалент Perl того, что я пытаюсь сделать, будет выглядеть примерно так: 

my $string = `cat file.log | tail -1`;

Ответы [ 5 ]

47 голосов
/ 08 сентября 2011

Используйте подпроцесс.PIPE, как описано в разделе документации подпроцесса «Замена конвейера оболочки» : 

import subprocess
p1 = subprocess.Popen(["cat", "file.log"], stdout=subprocess.PIPE)
p2 = subprocess.Popen(["tail", "-1"], stdin=p1.stdout, stdout=subprocess.PIPE)
p1.stdout.close()  # Allow p1 to receive a SIGPIPE if p2 exits.
output,err = p2.communicate()

Или, используя модуль sh , трубопровод становится составом функций : 

import sh
output = sh.tail(sh.cat('file.log'), '-1')
7 голосов
/ 08 сентября 2011 
import subprocess
task = subprocess.Popen("cat file.log | tail -1", shell=True, stdout=subprocess.PIPE)
data = task.stdout.read()
assert task.wait() == 0

Обратите внимание, что это не захватывает stderr. И если вы хотите захватить и stderr, вам нужно использовать task.communicate(); вызов task.stdout.read() и затем task.stderr.read() может привести к взаимоблокировке, если заполнится буфер для stderr. Если вы хотите, чтобы они были объединены, вы можете использовать 2>&1 как часть команды оболочки.

Но, учитывая ваш точный случай, 

task = subprocess.Popen(['tail', '-1', 'file.log'], stdout=subprocess.PIPE)
data = task.stdout.read()
assert task.wait() == 0

полностью исключает необходимость в трубе.

2 голосов
/ 08 сентября 2011

Это: 

import subprocess
p = subprocess.Popen("cat file.log | tail -1", shell=True, stdout=subprocess.PIPE, stderr=subprocess.PIPE, stdin=subprocess.PIPE)
#for shell=False use absolute paths
p_stdout = p.stdout.read()
p_stderr = p.stderr.read()
print p_stdout

Или это должно работать: 

import os
result = os.system("cat file.log | tail -1")
1 голос
/ 28 апреля 2016

Другой способ, похожий на Popen: 

command=r"""cat file.log | tail -1 """
output=subprocess.check_output(command, shell=True)
0 голосов
/ 16 ноября 2017

Это вилка из @ chown с некоторыми улучшениями:

  • псевдоним для import subprocess, упрощает настройку параметров
  • если вы просто хотите получить вывод, вам не нужно устанавливать stderr или stdin при вызове Popen
  • для лучшего форматирования рекомендуется декодировать вывод
  • shell=True необходим для вызова переводчика для командной строки 
#!/usr/bin/python3

import subprocess as sp

p = sp.Popen("cat app.log | grep guido", shell=True, stdout=sp.PIPE)

output = p.stdout.read()
print(output.decode('utf-8'))

$ cat app.log 
2017-10-14 22:34:12, User Removed [albert.wesker]
2017-10-26 18:14:02, User Removed [alexei.ivanovich] 
2017-10-28 12:14:56, User Created [ivan.leon]
2017-11-14 09:22:07, User Created [guido.rossum]

$ python3 subproc.py 
2017-11-14 09:22:07, User Created [guido.rossum]
...