Eclipseでhadoopソースコードの投機実行をオフにする方法

Question

hadoopソースコードでオフにする必要があり、Eclipseでそのパッケージを見つけることができません。 https://hadoop.apache.org/docs/stable/api/org/apache/hadoop/mapreduce/Job.html#setReduceSpeculativeExecution%28boolean%29

Answer 1

投機的実行を無効にする場合は、mapred-site.xmlにこれらのプロパティを追加します。

<property> 
    <name>mapreduce.map.speculative</name> 
    <value>false</value> 
</property> 
<property> 
    <name>mapreduce.reduce.speculative</name> 
    <value>false</value> 
</property> 

または、ジョブレベルで、Driverクラスのプロパティを設定します。そのソースコードについては

Configuration conf = new Configuration(); 
conf.set(“mapreduce.map.speculative”,false); 
conf.set(“mapreduce.reduce.speculative”,false); 

これらを参照してください：hadoop-mapreduce-project、JobとJobConf