spark的公平日程安排是否仍然有效,即使您不设置
sc.setLocalProperty("spark.scheduler.pool", "pool1")
在你的代码里?
我了解到fifo在默认和设置下使用 --conf spark.scheduler.mode=FAIR
在提交spark作业期间,将调度模式更改为fair。
但是,如果我在代码中没有指定任何池,它还会使用公平调度吗?
spark的公平日程安排是否仍然有效,即使您不设置
sc.setLocalProperty("spark.scheduler.pool", "pool1")
在你的代码里?
我了解到fifo在默认和设置下使用 --conf spark.scheduler.mode=FAIR
在提交spark作业期间,将调度模式更改为fair。
但是,如果我在代码中没有指定任何池,它还会使用公平调度吗?
暂无答案!
目前还没有任何答案,快来回答吧!