Czytanie stderr podprocesu podczas wykonywania

Question

Chciałbym przeczytać, co jest napisane na stderr przez podproces w trakcie wykonywania.

Jednakże, kiedy używam tego skryptu, który napisałem, stderr wydaje się nie mieć nic do przeczytania, dopóki nie zakończy się podproces.

#!/usr/bin/env python2 

import sys 
from subprocess import Popen, PIPE, STDOUT 

if len(sys.argv) < 2: 
    print "Please provide a command" 
    sys.exit(1) 

sub = Popen(sys.argv[1:], stdout=PIPE, stderr=STDOUT) 

for i, line in enumerate(sub.stdout): 
    sys.stdout.write("%d: %s" % (i, line)) 

edit:

Ok, stałam się bliżej. Jeśli określę liczbę bajtów do odczytu, pokona to buforowanie.

#!/usr/bin/env python2 

import sys 
from subprocess import Popen, PIPE, STDOUT 

if len(sys.argv) < 2: 
    print "Please provide a command" 
    sys.exit(1) 

sub = Popen(sys.argv[1:], stdout=PIPE, stderr=STDOUT) 

i = 0 
while sub.poll() is None: 
    line = sub.stdout.read(64) 
    line.strip("\b") 
    sys.stdout.write("%d: %s\n" % (i, line)) 
    i += 1 

fragment wyjścia:

58: 86 q=21.0 size= 4541841kB time=00:00:22.08 bitrate=1685014.2kbi 
frame= 567 fps= 86 q=22.0 size= 4543667kB time=00:00:2 
frame= 621 fps= 87 q=20.0 sizs/s  
frame= 4545352kB time=00:00:26.11 bitrate=1425939.2kbits/s  
62: = 686 fps= 90 q=12.0 size= 4546970kB time=00:00:28.89 bitrate=1 
frame= 758 fps= 93 q=25.0 size= 4548534kB t 
frame= 794 fps= 92 bitrate=1168185.5kbits/s  
65: q=27.0 size= 4550901kB time=00:00:33.40 bitrate=1115897.0kbits/ 
frame= 827 fps= 91 q=27.0 size= 4552324kB time=00:00:34.7 
frame= 857 fps= 89 q=26.0 size= 
frame= 254kB time=00:00:36.12 bitrate=1032874.9kbits/s  
69: 892 fps= 88 q=25.0 size= 4556598kB time=00:00:37.36 bitrate=9988 
frame= 948 fps= 89 q=19.0 size= 4558565kB time= 
frame= 1006 fps= 90 q=19937320.4kbits/s  
72: .0 size= 4560139kB time=00:00:42.16 bitrate=885880.0kbits/s  
73: frame= 1060 fps= 91 q=19.0 size= 4561958kB time=00:00:44.49 bitr 
frame= 1122 fps= 93 q=18.0 size= 4563460 
frame= 1173 fps=0:47.08 bitrate=793898.4kbits/s 

Wygląda na to, mój problem jest teraz, że ffmpeg używa znaków klawisz Backspace lub podobny bałagan z stdout. Nie jestem pewien, co się tutaj dzieje.

Answer 1

Proponuję użyć modułu sh. Jest to bardzo fajny program, który owija podprocesy w pythonie i daje pythonic, piękny interfejs, który pokochasz. Spójrz na docs.

Jeśli naprawdę nie chcesz moduł sh użyć communicate metodę Popen

Answer 2

Należy użyć rur do obu, również trzeba zadzwonić communicate():

sub = Popen(sys.argv[1:], stdout=PIPE, stderr=PIPE) 
output, error_output = sub.communicate() 

print 'OUTPUT:' 
print output 

print 'ERROR:' 
print error_output 

Answer 3

Jeśli podproces doesn't use block-buffering wtedy może spróbować:

for i, line in enumerate(iter(sub.stdout.readline, b"")): 
    print i, line,