如何使用python从reducer输出到多个目录/文件

pxy2qtax  于 2021-06-02  发布在  Hadoop
关注(0)|答案(0)|浏览(292)

我必须根据某些条件将输出写入多个目录。我知道可以用 MultipleOutputFormat 在java中初始化。
我想知道,如果不使用pydoop等外部库,我们如何在python中实现这一点。
输出应该如下所示:

  1. a1/b1/c1/file1,
  2. a1/b1/c2/file2,
  3. a1/b2/c1/file3,
  4. a2/b1/c1/file4,
  5. a2/b2/c2/file5,
  6. a2/b2/c3/file6

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题