hadoop mapreduce全局计数器

xriantvc  于 2021-05-30  发布在  Hadoop
关注(0)|答案(1)|浏览(452)

我需要一个全局计数器在我的申请。当所有reduce任务完成后,我必须打印全局计数器。
我在这里找到了解决办法。但是,我想知道在用c++编写应用程序时,是否可以使用hadoop流或管道的全局计数器。

envsm3lx

envsm3lx1#

您可以使用流进程的stderr输出。
我发现了这个问题:https://issues.apache.org/jira/browse/hadoop-1328
它有几个补丁,我猜你可以找到关于如何做全球计数器。

相关问题