FAQ-通过Yarn定位任务失败原因方法
更新时间: 2024-03-11 02:49:04
阅读 1819
FAQ-通过Yarn定位任务失败原因方法
问题描述/异常栈
通过Yarn定位任务失败原因方法
解决方案
1、猛犸平台Hive任务查找日志路径分以下三类:
- 通过数据开发执行,日志链接可通过数据开发–运行结果–节点日志获取;
- 通过线上调度执行,日志链接可通过数据开发--前往任务管理--执行历史–实例ID–节点日志获取;
- 通过自助分析执行,日志链接可通过自助分析--执行历史–节点日志获取;
2、在猛犸平台点击节点日志(数据开发/线上调度)或运行日志(自助分析)右侧Application_Id列表中最后一个application_id;
3、通过application_id跳转至yarn日志页面后,点击failed标签下数字,跳转至具体失败map/reduce任务;
4、跳转至map/task失败任务列表中,查看note标签中任务失败原因
5、如note中失败原因不够详细,可点击logs标签下logs超链接,跳转至失败task详细日志页面,如报错信息过多,可搜索exception、error、caused by 或at关键字,一般错误信息会出现在这些关键字前后;
问题原因
待补充;
作者:qianzhangyuan
文档反馈
以上内容对您是否有帮助?