我需要按作业执行时间比较两种hadoop调度算法。我可以使用什么来获取所有任务的执行时间？
qvk1mo1f1#
您可以从以下地址查看有关任务和作业的详细信息：
http://hostnameofmachinerunningtheJobTracker:50030/jobtracker.jsp
您可以从链接中获得其他信息
z0qdvdin2#
jobtrackerwebui提供了非常有用的报告，可以比较每个mapper和reducer的所有可用日志。也看看 mrbench 类内部 hadoop-test.jar 档案文件。网上有大量关于hadoop集群基准测试的信息，如本文所述。
mrbench
hadoop-test.jar
2条答案
按热度按时间qvk1mo1f1#
您可以从以下地址查看有关任务和作业的详细信息：
您可以从链接中获得其他信息
z0qdvdin2#
jobtrackerwebui提供了非常有用的报告，可以比较每个mapper和reducer的所有可用日志。
也看看
mrbench类内部hadoop-test.jar档案文件。网上有大量关于hadoop集群基准测试的信息，如本文所述。