java—hadoop的slowtaskthreshold是否有助于解决竞争条件？

pftdvrlh 于 2021-06-02 发布在 Hadoop

关注(0)|答案(1)|浏览(338)

我有一个关于 mapreduce.job.speculative.slowtaskthreshold .
医生说：
一个任务的平均进度率必须低于所有正在运行的任务的平均值的标准差的数目，这样才能认为该任务太慢。
我很好奇当一个过程被认为“太慢”时会发生什么。它会杀死并重新启动它吗？只是杀人？我很好奇，因为我想我可能遇到了一个竞争条件，并希望调整参数，以尽量减少问题。
资料来源：http://hadoop.apache.org/docs/current/hadoop-mapreduce-client/hadoop-mapreduce-client-core/mapred-default.xml

Java hadoop bigdata

来源：https://stackoverflow.com/questions/29975329/will-hadoops-slowtaskthreshold-help-to-resolve-race-condition