2017-06-13 3 views
1

私の理解:データローカリティの概念は、レデューサーにも適用できますか?

データローカリティの概念は、入力ファイルを扱う場合にのみMapperにのみ適用されます。

Reducersも処理中のデータローカリティ概念を使用しますか?

データローカリティ:

データ局所性は、それがデータに計算をもたらすのではなく、その場所からデータを要求することによって、存在するデータの処理を指します。

  1. データを計算する際に、マッパーとリデューサーが機能します。

  2. マッパーは、データの計算中にデータの局所性を使用します。

  3. Reducerはマッパー出力として入力を受け取ります。

異なるデータノードに格納されたマッパー出力(中間データ)を仮定します。

Reducersはコンピューティング時にデータのローカリティを使用していますか?

+0

あなたの質問について少し詳しく説明できますか? –

答えて

0

いいえ、データローカリティの概念はMAPPERSにのみ適用されます。

ギザギザのロジックは、MAP出力のユニークキーに基づいて割り当てられます。

関連する問題