通过分层算法实现突发型HPC工作负载的公平调度的边界队列等待
arXiv:2610.32027v1 发布类型:新 摘要:HPC 集群被多个项目共享,每个项目都享有一定数量的节点小时配额,而如何确保公平性正变得愈发困难。基础模型工作流与自动化流水线使得作业提交呈现出突发且高度集中的特点,少数重度用户占据了大量资源,导致偶尔使用的用户不得不承受由频繁提交的用户造成的队列等待延迟,却无法获知自己的作业究竟需要等待多久。现有的调度器要么忽视历史使用情况,要么仅保护队列头部的作业,要么假定正在运行的作业可以被抢占。我们提出了一种名为 HyDRA 的混合式截止时间与排名感知调度器,它能够在保障用户间公平性的同时,严格限制每项作业的队列等待时间。HyDRA 在作业到达时即根据其规模及其所属项目的优先级为其分配一个截止时间……


