Hadoop作业:任务无法报告状态601秒

Question

在伪节点上运行hadoop作业时,任务失败并被杀死.错误:任务尝试_无法报告状态601秒

但是同一个程序正在运行Eclipse(本地工作).

任务:大约有25K关键字,输出将是所有可能的组合(一次两个),即大约25K*25K entires

可能是什么问题？

Answer 1

由于某种原因,在伪节点上执行任务时,任务没有进展.您可以在mapred-site.xml中增加"mapred.task.timeout"设置.mapred-default.xml中的默认值为:

 <property>
    <name>mapred.task.timeout</name>
    <value>600000</value>
    <description>The number of milliseconds before a task will be 
                 terminated if it neither reads an input, writes 
                 an output, nor updates its status string.
    </description>
 </property>