2017-01-27 1 views
0

私は毎日のワークフローで実行されている50以上のジョブよりもはるかに大きい1つのジョブを持っています。私は、プロパティーyarn.app.mapreduce.am.resource.mbがちょうど大きな仕事のために大きくなるようにしたいと思います。私は運がいいですか?クラスタ全体でどのYARN部分を変更する必要があるのか​​をどのように知ることができますか?どのYARN構成パラメータを各アプリケーションで再読み込みしますか?

答えて

1

この設定は、YARNサービスの再起動なしでジョブレベルで変更できます。一般的には、各MRプロパティを変更することができます。 mapper/reducer/appmasterのメモリ設定などのジョブレベルプロパティは、通常、ジョブレベルで更新できます。

this helpful postをチェックすると、このトピックの詳細を確認できます。

+0

非常に良いリンク!なぜ公式のYARNのドキュメンテーションはこれらのパラメータを収集せずに "ビン"を再起動するのですか? –

+0

@JudgeMentalオープンソースの地獄、そうだね:) – AdamSkywalker

関連する問題