一种适合迭代计算的 MapReduce 优化方法

新一代信息技术

本发明公开了一种适合迭代计算的 MapReduce 优化方法，是应

用在一种 Hadoop 集群系统中，该集群系统包括一个主节点以及多个从

节点，所述方法包括：主节点接收用户提交的多个 Hadoop 作业，主节

点的作业服务进程将作业放入作业队列中，并等待主节点的作业调度

器进行作业调度，主节点等待从节点发来的任务请求，并在接收到任

务请求后，主节点的作业调度器优先调度本地化任务，如果在发出任

务请求的从节点上没有本

未应用