减速器失败 [英] Reducers failing

查看:125
本文介绍了减速器失败的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我们使用3个群集机器,并且mapreduce.tasktracker.reduce.tasks.maximum属性设置为9.当我设置了reducer的no等于或者小于9时job正在成功,但是如果我设置的大于9,那么它会失败,例外情况是Task attempt_201701270751_0001_r_000000_0 ping 60秒失败。杀死!。任何人都可以指导我会发生什么问题。

We are using 3 cluster machine and mapreduce.tasktracker.reduce.tasks.maximum property is set to 9. When I set no of reducer is equal to or less than 9 job is getting succeeded but if I set greater than 9 then it is failing with the exception "Task attempt_201701270751_0001_r_000000_0 failed to ping TT for 60 seconds. Killing!". Can any one guide me what will be the problem

推荐答案

https://问题.apache.org / jira / browse / MAPREDUCE-1905 (仅供参考)。

您可以尝试增加任务超时吗?

Can you please try to increase the task timeout ?

(mapreduce.task.timeout为更高值)( 0将禁用超时

(mapreduce.task.timeout to a higher value ) ( 0 will disable the timeout )

这篇关于减速器失败的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆