作业的详细日志在cdh4hadoop中的哪里?

djmepvbi  于 2021-06-04  发布在  Hadoop
关注(0)|答案(1)|浏览(314)

我只是在hdfs里找到工作记录

/home/mps/cdh/users/history/done_intermediate/mps/job_1405497023620_0009-1405505656182-mps-simjoin%2D1.0.jar-1405505683781-0-0-FAILED-default.jhist

但这些工作历史信息远不像这样详细:

{"type":"TASK_FAILED","event":{"org.apache.hadoop.mapreduce.jobhistory.TaskFailed":{"taskid":"task_1405497023620_0008_m_000002","taskType":"MAP","finishTime":1405505044309,"error":", \n","failedDueToAttempt":{"string":"attempt_1405497023620_0008_m_000002_3"},"status":"FAILED"}}}

我在哪里可以找到更详细的信息,如异常抛出或日志信息记录器的工作的记录器在Map和缩小?

vd2z7a6w

vd2z7a6w1#

检查此目录:(根据您的设置)

/var/log/hadoop-0.20-mapreduce/userlogs/job_201407151208_0031/attempt_201407151208_0031_m_000000_0

你会发现
标准
标准错误
系统日志
在这些文件中,您将详细了解作业的执行情况。

相关问题