2016-01-26 2 views
7

EMRスパーククラスタで一連のスパークステップを設定し、時間がかかりすぎると現在のステップを終了します。しかし、私がマスターノードにsshしてhadoop jobs -listを実行すると、マスターノードは実行中のジョブがないと信じているようです。私はクラスターを終了させたくありません。そうすると、私が実行しているクラスターの全く新しい時間を購入することになります。誰も私はクラスタ全体を終了せずにEMRのスパークステップを終了するのを助けることができますか?簡単だawsでスパークステップを終了する

答えて

15

yarn application -kill [application id] 

あなたは(クラスタの状態の下で、右上にあるリンクでの)リソースマネージャからアプリケーションを殺すことができる

yarn application -list 
+0

完璧、ありがとうございます! –

3

を使用して、実行中のアプリケーションを一覧表示することができます。 リソースマネージャーで、削除するアプリケーションをクリックし、アプリケーションページに小さな「kill」ラベル(左上)があります。クリックすると、アプリケーションを終了できます。

明らかにSSHでもかまいませんが、この方法では、一部のユーザーにとってはより迅速で簡単です。

関連する問題