收录:
摘要:
本发明公开了Hadoop平台下动态标签匹配DLMS调度方法,属于计算机软件领域,针对Hadoop集群节点性能差异大、资源分配随机性、执行时间过长的问题,本发明提出一种将节点性能标签(以下简称节点标签)和作业类别标签(以下简称作业标签)进行动态匹配的调度器。节点初始分类并赋予原始节点标签,节点检测自身性能指标生成动态节点标签,作业根据部分运行信息进行分类生成作业标签,资源调度器将节点资源分配给对应标签的作业。实验结果表明,相对于YARN中自带的调度器在作业执行时间上有较大的缩短。
关键词:
通讯作者信息:
电子邮件地址: