MapReduce运行报错时如何定位到错误信息
当用命令行运行mr的时候程序跑得好好的,但一放到hadoop里面就报错,关键不知道怎么定位到mr报错,经过总结如下:
当遇到 INFO mapreduce.Job: Job job_1588308947581_0024 failed with state FAILED due to: Task failed task_1588308947581_0024_m_000000 报错时, 如下图
可以直接定位到从节点报错日志的路径下面 /usr/local/src/hadoop-2.6.5/logs/userlogs/application_1588308947581_0024/container_1588308947581_0024_01_000006,然后查看stderr文件就知道报错在哪了,如图