我们可以在hadoop的多输入类中传递不同类型的输入格式文件吗?

m2xkgtsf  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(339)

我们能传递不同类型的输入格式文件吗。 TextInputFormat 以及 SequenceInputFormatMultipleInput 在hadoop中?
如下所示:
multipleinputs.addinputpath(jobconf,新路径(dictionarysource),someinputformat.class,translatemapper.class);
multipleinputs.addinputpath(jobconf,新路径(dictionarysource),someotherinputformat.class,translatemapper.class);

z2acfund

z2acfund1#

简而言之,是的,这个参数是 InputFormat ```
Class<? extends InputFormat> inputFormatClass

关于“如何在reducer中处理它?”——reducer的输入必须与mapper的输出相同,可以是您想要的任何东西

相关问题