集群运行MapReduce任务报错Error: Java heap space

来源:互联网 发布:java url encoder 编辑:程序博客网 时间:2024/05/16 08:45

集群运行MapReduce任务时,有部分任务在跑reduce任务时报错:

17/09/19 19:48:00 INFO mapreduce.Job: Task Id : attempt_1505821347382_0001_r_000000_0, Status : FAILED
Error: Java heap space
Container killed by the ApplicationMaster

这里写图片描述

< property>
< name>mapred.child.java.opts< /name>
< value>-Xmx1024m< /value>
< /property>

子进程所使用的虚拟机内存大小
或者

代替 mapred.child.java.opts.
< property>
< name>mapreduce.map.java.opts< /name>
< value>< /value>

< property>
< name>mapreduce.reduce.java.opts< /name>
< value>< /value>

阅读全文
0 0
原创粉丝点击