糸ベースのSparkアプリケーションのCPU使用状況を取得する方法

Question

私は、ハープ・クラスター上で糸を使用してApache Sparkアプリケーションを実行しています。プログラムが終了したら、そのプログラムのCPU使用率のプロファイルを確認する方法がありますか？基本的には、1秒または2秒の間隔でプロファイリングログが必要です。

Answer 1

あなたは基本的にあなたがResourManagerそれぞれ1または2秒を照会RESTクライアントを実装し、実行時に、独自のログを作成する必要が

https://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html#Cluster_Applications_API

のResourceManager残りAPI'sを使用することができます。