1. 首页
  2. 数据库
  3. 其它
  4. MapReduceV1:Job提交流程之JobClient端分析

MapReduceV1:Job提交流程之JobClient端分析

上传者: 2021-02-01 08:09:30上传 PDF文件 148.08KB 热度 6次
我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。MapReduceV1实现中,主要存在3个主要的分布式进程(角色):JobClient、JobTracker和TaskTracker,我们主要是以这三个角色的实际处理活动为主线,并结合源码,分析实际处理流程。下图是《Hadoop权威指南》一书给出的MapReduce V1处理Job的抽象流程图:如上图,我们展开阴影部分的处理逻辑,详细分析Job提交在JobClient端的具体流程。在编写好MapReduce程序以后,需要将Job提交给JobTracker,那么我
用户评论