李勇,张章,孟丹,韩冀中,李青,王旻.面向混合负载的集群资源弹性调度[J].高技术通讯(中文),2014,24(8):782~790 |
面向混合负载的集群资源弹性调度 |
|
|
DOI: |
中文关键词: 集群资源调度, 作业约束调度, 负载感知, 混合负载, 互联网数据中心(IDC) |
英文关键词: |
基金项目: |
作者 | 单位 | 李勇 | 中国科学院计算技术研究所计算机应用研究中心;中国科学院研究生院 | 张章 | 中国科学院信息工程研究所第二研究室 | 孟丹 | 中国科学院信息工程研究所第二研究室 | 韩冀中 | 中国科学院信息工程研究所第二研究室 | 李青 | 中国科学院计算技术研究所计算机应用研究中心;中国科学院研究生院 | 王旻 | 中国科学院计算技术研究所计算机应用研究中心;中国科学院研究生院 |
|
摘要点击次数: 2985 |
全文下载次数: 2390 |
中文摘要: |
针对目前集群资源调度方法难以适应互联网业务多样化、定制化特征的问题,提出了一种面向混合负载的集群资源弹性调度方法。该方法通过构建作业约束描述语言,允许作业基于自身负载特征提出多维度的资源申请和具有负载意识的资源调度算法,实现在同一集群内各类业务统一部署与管理,及时匹配资源需求的变化;通过建立作业的软约束与硬约束之间的转化机制,满足作业在不同执行阶段对资源的定制化需求。实验表明,该方法相比于Hadoop,可允许作业利用较少资源获得更优性能,在实际生产系统中,基于该方法可将集群资源利用率由62%提升到75%。 |
英文摘要: |
|
查看全文
查看/发表评论 下载PDF阅读器 |
关闭 |
|
|
|