並列化されたPythonスクリプトをどのようにプロファイルできますか？

Question

は、私はいくつかのことを並列化するmultiprocessingを使用することを含むmy_parallel_script.pyと呼ばれるPythonスクリプトを持っていると私は、次のコマンドでそれを実行したとします

python -m cProfile my_parallel_script.py 

これは親プロセスのみためのプロファイル出力を生成します。子プロセスで行われた呼び出しはまったく記録されません。子プロセスのプロファイルも可能ですか？

唯一のオプションは、ソースを変更することですが、これを行う最も簡単な方法は何ですか？

Answer 1

cProfileは1つのプロセス内でのみ動作するため、プロファイルされた子プロセスを自動的に取得することはありません。

1つのプロセスとして個別に呼び出すことができるように、子プロセスコードを調整することをお勧めします。その後、プロファイラの下で実行します。プロファイリング中にシステムのマルチプロセスを実行する必要はなく、単一の子のみを実行するようにジョブを単純化します。