我正试图将一个Dataframe保存为一个表,我想知道是否有一个默认的路径配置可以让我的生活更轻松。
我明白这是可行的:
df.write.saveAsTable("mytable", path='s3a://mybucket/mybucketlocation')
但是有没有可能有这个命令
df.write.saveAsTable("mytable")
与spark配置实现相同的角色?
目前我有这个配置集,但它不做的把戏。
('spark.sql.warehouse.dir', 's3a://mybucket/mybucketlocation')
暂无答案!
目前还没有任何答案,快来回答吧!