本文主要是介绍Oozie 任务启动后占用大量资源导致任务失败解决,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
如果集群资源不足,Oozie 任务启动后占用大量资源可能导致任务失败一般有两种情况。
一是导致自身任务挂起无法执行成功;二是导致其他任务无法启动。
解决办法
在 workflow.xml 的配置 <configuration> 中增加如下属性 <property> :
<property><name>oozie.launcher.mapreduce.map.memory.mb</name><value>512</value>
</property>
<property><name>oozie.launcher.yarn.app.mapreduce.am.resource.mb</name><value>512</value>
</property>
限制任务启动后使用的资源即可。
这篇关于Oozie 任务启动后占用大量资源导致任务失败解决的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!