pySparkコードの実行時に実行者IDを取得するにはどうすればよいですか?スカラではSparkEnv.get().executorId()
を使うことができますが、pySparkを使用しているときは同等のものは見つかりません。pySpark:実行者IDを取得
4
A
答えて
0
あなたは執行を照会するREST APIを使用することができ、私はexecutor IPs
ボアズ
1
を見つけるためにpySparkUtilsにUIがエグゼキュータのIDの、並びにそれらの個々のパフォーマンスへのあなたのアクセスを与えるスパークをそれを使用していますメトリック
関連する問題
- 1. ジラオンデマンド、実際の送信者のメールIDを取得
- 2. PySpark - UDFから行のインデックスを取得
- 3. Spring Cloud DataFlow - タスク実行後に実行IDを取得
- 4. 発信者IDを取得する
- 5. noUiSliderスライドイベント発信者のIDを取得
- 6. 現在実行中のHadoopタスクのタスク試行IDを取得
- 7. pysparkからクライアントを取得
- 8. R - 並列実行時に作業者名を取得する
- 9. 実行中のプロセスIDのディレクトリパスを取得
- 10. Selenium IDEで実行時にテキストボックスIDを取得する方法
- 11. qsub:最後に実行されたジョブIDを取得
- 12. チャットデータを取得し、受信者と送信者IDで並べ替えます。
- 13. PHPで実行されるMySQLクエリプロセスIDの取得方法
- 14. 最大IDを持つ行を取得
- 15. pipインストール後にpysparkを実行するpyspark
- 16. GoogleからGoogleアカウントの所有者を取得するプロジェクトID
- 17. Wordpress投稿者IDによって投稿を取得
- 18. リクエストダイアログ - 送信者IDを取得する方法
- 19. Vueテーブル行からIDを取得
- 20. 同じクエリで更新が実行される行のIDを取得する
- 21. Pyspark:動的ハイブクエリでcurrent_timestampを取得
- 22. pysparkのs3バケットからデータを取得
- 23. mllib kmeans pysparkでクラスターラベルを取得
- 24. pysparkを実行できません
- 25. JupyterノートブックでpySparkを実行中 - Windows
- 26. pyspark設定でpythonスクリプトを実行
- 27. pysparkのタプルでマップを実行する
- 28. PySparkでスクリプトを実行するには
- 29. 現在のユーザーのYouTubeコンテンツ所有者IDの取得
- 30. ListAdapterの行IDからListViewアイテムIDを取得する