如何在spark中启动驱动程序和内核

jutyujz0  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(293)

我在做一些Pypark的工作,但这需要很长时间。检查了spark webui,发现它报告了0个内核正在运行,0个驱动程序启动。这就是问题所在吗?我该怎么修?我做错了什么这是发射命令:

  1. spark-submit --master spark://namenode:port --conf spark.driver.cores=3 --driver-memory 4g --executor-memory 2g --num-executors 3 --executor-cores 3 main.py

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题