2017-06-23 8 views
4

pySparkコードの実行時に実行者IDを取得するにはどうすればよいですか?スカラではSparkEnv.get().executorId()を使うことができますが、pySparkを使用しているときは同等のものは見つかりません。pySpark:実行者IDを取得

答えて

0

あなたは執行を照会するREST APIを使用することができ、私はexecutor IPs

ボアズ

1

を見つけるためにpySparkUtilsにUIがエグゼキュータのIDの、並びにそれらの個々のパフォーマンスへのあなたのアクセスを与えるスパークをそれを使用していますメトリック

関連する問題