1
私はscala IDE上でsparkのpageRankの例を実行しました。実行が完了してもジョブの実行履歴を保持したい。 は私がそれらのメトリックを追跡持つように、結果をグラフィカルに可視化するために役立つ任意のツールはあります：メモリ、I/Oディスクの量、時間の実行、CPU、...spark Pagerankの実行結果をモニタする
があり、事前
A
答えて
1
にありがとうここ
http://spark.apache.org/docs/latest/monitoring.html#rest-api
と、それを使用する方法である監視残り-APIです
http://techblog.kenshoo.com/2015/11/spark-monitoring-tips-from-trenches.html
関連する問題
- 1. 他のモニタでコンソールアプリケーションを実行する
- 2. SELECT結果の文を実行する
- 3. データベースの実行結果とMyBatisの実行結果が矛盾している
- 4. 実行中の結果
- 5. 結果セットを実行しているときに結果セット
- 6. DBI/Spark：結果をSpark Dataframeに保存する方法は？
- 7. Wikidataの結果はPageRankのようなものでソートされています
- 8. Intellij IDEA：スパークコード実行結果がjava.lang.VerifyError
- 9. 2回実行するループ結果
- 10. mapPartitions（Spark）の結果を合理化
- 11. SELECTの結果行で数学を実行する
- 12. Scala - Spark：結果をファイルに保存
- 13. sqlalchemyストアドプロシージャの実行結果の解析
- 14. 実際の結果よりも少ない行数を返す結果セット
- 15. 実行バッチファイルのxcopyと結果
- 16. Spark SQL：WHERE句のUDFの結果のカラム名を指定する
- 17. 列の結果を行の結果として表示する
- 18. FPGrowth in spark混乱した結果
- 19. マップ結果をSpark scalaのテキストファイルに保存する方法は？
- 20. spark sql groupの結果をscalaで取得するには？
- 21. Specflowを実行し、キュウリのフォーマットで結果を取得する
- 22. 別の結果のGraphQLクエリを実行する
- 23. Promiseの結果で複数のテストを実行する - Mocha
- 24. Scala/Spark：ブロードキャストを使用してローカルとクラスタでsparkプログラムを実行すると、別の結果が得られるのはなぜですか？
- 25. Drools - ランダムアクション結果のルールを実行する能力？
- 26. junitテストの実行結果をデータベースに記録する方法
- 27. dbms_output.put_lineの結果を実行する方法
- 28. Flaskでpythonスクリプトの結果を実行するには
- 29. コードの実行完了後に結果を削除するPYTHON
- 30. javascriptコードの実行結果をデコードする方法