在启用动态分配的情况下,局部级别进程\u local的数据局部性如何在spark中工作

oxalkeyp  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(323)

在动态分配的情况下,执行器在一段空闲时间后被移除,因此可能有一段时间执行器运行为零。所以当一个任务在没有执行器运行的时候被提交时,任何一个数据位置为 PROCESS_LOCAL ? 因为 PROCESS_LOCAL 意味着数据位于jvm中,并且当前没有执行器启动。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题