MapReduce运行报错时如何定位到错误信息

当用命令行运行mr的时候程序跑得好好的,但一放到hadoop里面就报错,关键不知道怎么定位到mr报错,经过总结如下:

当遇到  INFO mapreduce.Job: Job job_1588308947581_0024 failed with state FAILED due to: Task failed task_1588308947581_0024_m_000000 报错时, 如下图

可以直接定位到从节点报错日志的路径下面  /usr/local/src/hadoop-2.6.5/logs/userlogs/application_1588308947581_0024/container_1588308947581_0024_01_000006,然后查看stderr文件就知道报错在哪了,如图

猜你喜欢

转载自blog.csdn.net/u011135852/article/details/105924992