FAQ-Hive任务启动后长时间无执行进度
更新时间: 2024-03-11 02:46:43
阅读 1617
问题描述
问题描述/异常栈
##FAQ-Hive任务启动后长时间无执行进度
解决方案
如果reduce出现频繁的被kill掉:
reduce task被kill掉是为了空置资源给map任务,可通过配置参数mapreduce.job.reduce.slowstart.completedmaps指定map任务完成进度比例后才开始启动reduce任务
问题原因
该情况一般为用户所在项目队列资源不足,可通过猛犸平台--项目中心--资源管理–资源监控 功能页面查看队列目前CPU及内存使用情况
作者:常惠渊
文档反馈
以上内容对您是否有帮助?