アマゾンEMRを一時的に閉じる

Question

私は一時的にEMR ec2インスタンスを閉じて追加料金を避けることができるかどうかを知りたいと思っていました。私はクラスタのスナップショットを取得し、一時的にec2インスタンスを閉じることができるかどうかを知りませんでした。

Answer 1

現在、クラスタ上のすべてのもの（HDFSを含む）を失うことなくマスターインスタンスを終了/停止することはできませんが、必要のないときにコア/タスクノードインスタンスグループを縮小することができます。少なくとも1つのコアインスタンス（または保持するHDFSに大量のデータがある場合はそれ以上）を保持する必要がありますが、クラスタが使用されていない場合は、タスクインスタンスグループのサイズを0に変更できます。

一方、あなたが本当に必要とするものがあなたのクラスタ上になければ、不要になったクラスタを終了してから、もう一度それを必要とするときに新しいクラスタにクローンしたいだけかもしれません。

たとえば、出力データをS3またはEMRクラスタの外部にある別のサービスに格納するだけの場合、アイドル状態でEMRクラスタを稼働させておく必要はありません。また、「スナップショット」する必要はありませんあなたのクラスタは本質的にステートレスであるからです。

クラスタに格納されているデータ/構成が失われたくない場合は、使用していないときにクラスタをシャットダウンできるように、クラスタからデータを削除することを検討してください。 （もちろん、どのようにこれを行うかは、正確に何を話しているかによって異なります）