我试图创建一个gensim语料库并将其保存到任意hdfs或常规fs路径。我正在使用pyspark（2.2.1）并在hadoop集群上运行一个zeppelin笔记本。下面是我的最小示例：

from gensim import corpora
import os

path = "/my/existing/hadoop/path"
corpus = [[(0,0), (1,2)]]
corpora.MmCorpus.serialize(os.path.join(path,"corpus.mm"), corpus)

这会导致错误：

[Errno 2] No such file or directory: '/my/existing/hadoop/path/corpus.mm'

尽管路径存在。
进行以下工作。

corpora.MmCorpus.serialize("corpus.mm", corpus)
corpora.MmCorpus.serialize(os.path.join("/tmp","corpus.mm"), corpus)

但是，我找不到它。我查过了 /tmp 以及 hadoop fs -ls /tmp 使用pyspark时需要什么样的路径？