一种异构环境下的Hadoop调度算法.doc

一种异构环境下的Hadoop调度算法 梁建武1周杨2 中南大学信息科学与工程学院长沙 410075 摘要MapReduce作为一种重要的大规模数据并行程序模型已经越来越广泛的应用于web索引数据挖掘以及科学仿真等方面作为MapReduce的开源实现Hadoop的性能依赖于它的任务调度机制本文提出了一种异构环境下的Hadoop调度算法估计任务的完成时间结合系统负载以及时使用调度算法从而减小任务响应时