如何设置要执行distcp作业的Map器的数量?我知道我们可以通过hadoop设置mapper的最大数量 distcp -m . 但是,是否可以设置Map器的数量而不是最大数量?谢谢
distcp -m
sr4lhrrt1#
不,无法为设置Map器的确切数目 distcp 到现在为止。正如你所说,我们只能指定最大数量的同时副本与 -m . hadoophdfs处理同时复印机,以最佳方式完成拷贝作业。所以这可能是不让我们指定确切数字的原因。distcp-hadoop 2.7.2版
distcp
-m
1条答案
按热度按时间sr4lhrrt1#
不,无法为设置Map器的确切数目
distcp
到现在为止。正如你所说,我们只能指定最大数量的同时副本与
-m
. hadoophdfs处理同时复印机,以最佳方式完成拷贝作业。所以这可能是不让我们指定确切数字的原因。distcp-hadoop 2.7.2版