Hadoop公平调度算法的改进

摘要：

对于特定系统建立的Hadoop集群,可能有不同优先级别的任务作业.而以往的公平调度算法不能很好地根据作业优先级来合理分配资源.本文提出了一种公平调度算法的改进算法,在根据优先级对资源进行分配的同时,合理兼顾了低优先级作业的资源需求.实验表明,用改进后的调度算法能在保证低优先级作业运行的前提下,尽量分配给高优先级作业更多的资源.

关键词： 聚类算法 公平调度 资源分配 任务作业 Hadoop集群

作者: 李超越 徐国胜

作者单位: 北京邮电大学信息安全中心,北京,100876

会议类型: 国内会议

会议名称: 第十九届全国青年通信学术年会

会议地点: 上海

会议语种:中文

页码: 187-190

在线出版日期: 2014-10-15（万方平台首次上网日期，不代表论文的发表时间）