Hadoopの基本的な考え方

Question

hadoopで投機実行を設定する方法は？これらの変更を行うために必要な設定ファイルは ですか？段階的に詳述してください。

投機的実行の変更は、名前ノードまたはデータノードで行う必要がありますか？データノードに、私たちは（私のクラスタに1-10システムAN私は2,3データノードシステム用の投機的実行を設定）などの特定のシステムにそれらを設定することができれば

Answer 1

投機的実行は、Hadoopの中で、デフォルトでにになっています。

これは、クラスタ全体の財産であり、また、ジョブレベルで設定することができますmapred-site.xml

<property> 
    <name>mapreduce.map.speculative</name> 
    <value>true</value> 
</property> 
<property> 
    <name>mapreduce.reduce.speculative</name> 
    <value>true</value> 
</property> 

でこれらのプロパティを変更し、投機的実行を無効/有効にします。

データノードに、我々は特定のシステム

んにそれらを設定することができれば、投機的なタスクではなく、ノードを実行しているからジョブを制限することが可能です。