spark是否在崩溃恢复的工作节点上执行初始化代码

iaqfqrcu  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(188)

我想知道spark如何管理工作节点的崩溃恢复。
例如,如果我用spark submit job在“--files”参数中指定了一些jar文件,那么spark会将它们分发到所有工作节点。现在,当这些工作节点中的任何一个发生故障(即崩溃)时会发生什么?spark是否在工作节点恢复后重新分发文件(在--files参数中指定)?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题