hadoop—sparkDataframe写入hdfs的文件名

2q5ifsrm  于 2021-06-01  发布在  Hadoop
关注(0)|答案(0)|浏览(202)

问题是关于spark 1.6
当Dataframe写入hdfs时 SaveMode.APPEND 模式,我想知道哪些文件是新创建的。
一种方法是在作业前后跟踪hdfs中的文件,有更好的方法吗?
另外,在最后的工作统计图,我们是否有类似的每一个Spark行动。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题