深入大数据平台心脏:饿了么调度系统全解

随着饿了么在大数据应用的不断深入,需要解决任务数量增长快、任务多样化、任务关系复杂、任务执行效率低及任务失败不可控等问题。饿了么大数据平台现状:每天完成大数据任务计算54000+;节点集群85台。Ooize基于工作流调度引擎,是雅虎的开源项目,属于JavaWeb应用程序。由Oozie Client和OozieServer两个组件构成。OozieServer运行于JavaServlet容器(Tomcat)中的Web程序。工作流必须是一个有向无环图,实际上