java—apache crunch是否附带hadoop mapreduce api?

mepcadol  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(342)

当您从他们的网站下载apachecrunch时(它作为源代码提供),它没有它所基于的相关mapreduce类。两个问题:
1-这怎么可能?apachecrunch是mapreduce之上的一个抽象。为什么它没有与mapreduce类打包?
2-使用apache crunch开发需要做什么?我需要分别下载crunch和mapreduce吗?如果是这样,我如何知道我需要哪个mapreduce版本来匹配crunch版本?

ttvkxqim

ttvkxqim1#

我只是在apachecrunch中查找mapreduce类
我做了一个随机检查,这些类似乎都没有扩展hadoop类,而是像下面这样
静态函数,用于处理org.apache.hadoop.mapred.*包下的遗留Map器和还原器,作为crunch管道的一部分。
您使用的是0.6版还是更低版本?

相关问题