EMRスパーククラスタで一連のスパークステップを設定し、時間がかかりすぎると現在のステップを終了します。しかし、私がマスターノードにsshしてhadoop jobs -listを実行すると、マスターノードは実行中のジョブがないと信じているようです。私はクラスターを終了させたくありません。そうすると、私が実行しているクラスターの全く新しい時間を購入することになります。誰も私はクラスタ全体を終了せずにEMRのスパークステップを終了するのを助けることができますか?簡単だawsでスパークステップを終了する
7
A
答えて
15
:
yarn application -kill [application id]
あなたは(クラスタの状態の下で、右上にあるリンクでの)リソースマネージャからアプリケーションを殺すことができる
yarn application -list
3
を使用して、実行中のアプリケーションを一覧表示することができます。 リソースマネージャーで、削除するアプリケーションをクリックし、アプリケーションページに小さな「kill」ラベル(左上)があります。クリックすると、アプリケーションを終了できます。
明らかにSSHでもかまいませんが、この方法では、一部のユーザーにとってはより迅速で簡単です。
関連する問題
- 1. AWS EMRスパークステップargsバグ
- 2. クラスタモードでスパークステップを使用するAWS EMR。アプリケーションapplication_が失敗したステータスで終了しました
- 3. awsアプリケーションロードバランサssl終了
- 4. Kubernetes 1.4 AWSのSSL終了
- 5. AWSサーバの終了エラー
- 6. Node.js AWS S3アップロードを終了しないで終了機能を呼び出す
- 7. AWS上のノードアプリケーションのドッカー終了ステータス1
- 8. AWS EB:無効なrequirements.txt終了ステータス2
- 9. S3NativeFileSystemがAWS EMR 4.6.0でPysparkアプリケーションを終了しています
- 10. 終了時にアプリケーションを終了する
- 11. Python:whileループの終了を終了する
- 12. 終了時にプロセスを終了する
- 13. EMRクラスタを自動終了するAWSデータパイプラインオプション
- 14. AWS Lambda 'プロセスがリクエストを完了する前に終了しました'
- 15. AWS Lambdaが「要求を完了する前にプロセスが終了しました」
- 16. プログラムが終了すると `exec`でプロセスを終了する
- 17. Pythonでスクリプトを終了すると、サブプロセスが終了する
- 18. AWS Ealstic Beanstalk:PHPを実行するEC2インスタンスでHTTPSを終了する
- 19. ModalViewを終了ボタンでプログラムで終了する
- 20. AWS Spot Fleetで特定のインスタンスを終了
- 21. AWS CLIのhepページを終了できません
- 22. AWS CodeDeployインスタンスを強制終了できません
- 23. AWS EC2インスタンスが終了する前にnodejsでイベントをトリガー/キャプチャする方法
- 24. 終了することなくAWS ECSでノードコンテナを実行するには
- 25. VLCJプレーヤーでビデオを終了すると終了しますか?
- 26. アンドロイドダイアログをスクロールして終了するまで終了します。
- 27. AWSインスタンスとのSSHセッションが終了する
- 28. AWS特定の理由なしにECSコンテナが終了する
- 29. 終了時の状態でAndroidアニメーションを終了する
- 30. 成功した終了コードでJobExecutionDeciderを終了する方法
完璧、ありがとうございます! –