Python でサブプロセス出力を 1 行ずつ効率的に読み取って処理する方法

サブプロセスの標準出力を 1 行ずつ読み取る方法

Python では、サブプロセスを使用して大量の出力を生成する Linux ユーティリティを呼び出すと、次のような問題が発生する可能性があります。出力を段階的にキャプチャして処理します。

親プロセスでは、proc.stdout ステートメントの for 行が入力全体を読み取る前にそれを繰り返します。これにより、大量の出力が生成されるまでアプリケーションに出力が表示されなくなる可能性があります。

この問題に対処するには、代わりに proc.stdout.readline() を使用します。

import subprocess

proc = subprocess.Popen(['python', 'fake_utility.py'], stdout=subprocess.PIPE)
while True:
  line = proc.stdout.readline()
  if not line:
    break
  #the real code does filtering here
  print "test:", line.rstrip()

Thisこのソリューションを使用すると、サブプロセスから出力が利用可能になったときに、出力の各行をフィルターして印刷できます。サブプロセスのバッファリング動作を考慮する必要がある場合があることに留意してください。

以上がPython でサブプロセス出力を 1 行ずつ効率的に読み取って処理する方法の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。