一些信息如spark版本、输入格式（文本、Parquet、orc）、压缩等肯定会有所帮助。
但简言之，以下通常是经验法则。
num executors-这是整个集群将为此作业投入的执行器总数。执行器可以包含一个或多个任务。人们倾向于认为一个节点=一个执行者。每个节点最好有多个执行器。在后面的答案中会有更多关于这个的内容。
executor cores-这是每个executor的核心（任务）总数。在您的例子中，起点是每个执行器4个核心（即每个节点）。
executor memory—每个执行器的总内存。这由执行器中的所有任务或核心共享。
最可能的配置（但效率较低）num executors=7，executor cores=4，executor memory=8g在这种情况下，一个executor由4个任务共享。如果其中一个失败，则整个执行器将被标记为失败。
更好的配置num executors=14（每个节点2个），executor cores=2（每个executor 2个），executor memory=3g（每个executor 3g，剩下2g用于其余进程）
请注意，每个执行器一个内核也不好，因为在这种情况下，执行器启动时间可能太长。
在这种情况下，您需要划分资源以避免杀死整个执行器。
并行性这取决于输入数据的格式。