Hive on tez执行报错:Vertex did not succeed due to OWN_TASK_FAILURE

论坛 期权论坛 编程之家     
选择匿名的用户   2021-5-29 00:04   50   0

Vertex did not succeed due to OWN_TASK_FAILURE,

failedTasks:1 killedTasks:203, Vertex vertex_1601265411830_1281843_2_02 [Map 1] killed/failed due to:OWN_TASK_FAILURE]Vertex killed,

vertexName=Reducer 3, vertexId=vertex_1601265411830_1281843_2_04, diagnostics=[Vertex received Kill while in RUNNING state.

这种情况原因是container资源被抢占或者是资源不足。而task最大的失败次数默认是4.

解决方案:
am自己失败的最大重试次数,默认是2次。这里并不是说am自己挂了,只是因为一些系统原因导致失联了,命令行直接设置

set tez.am.max.app.attempts=5
分享到 :
0 人收藏
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

积分:3875789
帖子:775174
精华:0
期权论坛 期权论坛
发布
内容

下载期权论坛手机APP