在具有mapper任务的节点或具有reducer任务的节点上,在哪个节点上进行洗牌和排序?

46scxncf  于 2021-06-02  发布在  Hadoop
关注(0)|答案(0)|浏览(300)

我的问题是每个Map器任务输出(不合并)是否会发生无序排列和排序,还是在将节点上的所有Map器任务输出与reducer合并后发生。无序排列到底是什么?我看到了不同的定义。在一些视频上,甚至在《确定指南》一书中,洗牌意味着组合具有相同键值的对。但是在某些博客上,它是将Map器o/p s传输到reducer的过程。哪一个是正确的?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题