我在做一些Pypark的工作,但这需要很长时间。检查了spark webui,发现它报告了0个内核正在运行,0个驱动程序启动。这就是问题所在吗?我该怎么修?我做错了什么这是发射命令:
spark-submit --master spark://namenode:port --conf spark.driver.cores=3 --driver-memory 4g --executor-memory 2g --num-executors 3 --executor-cores 3 main.py
目前还没有任何答案,快来回答吧!
暂无答案!
目前还没有任何答案,快来回答吧!