マップ内の減速機の数を減らす

Question

MRでドライバクラスに3減速機を設定しました。

それは... 3つのパーティションが作成されます

を意味しますが、マッパーは2つだけのユニークなキーをemitingさは、男性と女性を言います。

この場合、減速機と減速機の動作時間はどのくらいですか？

Answer 1

あなたの質問は少しあいまいですが、私は何が起こるかの2つの説明を考え出すことができます：

1つのステージの削減

• リデューサー1は、すべての男性の結果
• リデューサー2を削減すべての女性 結果
• Resucer 3

を減速1の出力を低下させ、2減少

2分割ジョブ

• 減速1は、すべての男性は、
• 減速2は雌結果の最初の半分は
• 減速3雌結果

Answer 2

場合の後半を低減する低減をもたらす減少しますあなたは3つの減速装置を設定し、それらはすべて実行されます。ただし、に2つのキーがある場合は、ほとんど 2つのレデューサーが実際に処理するデータを受け取ります。