多项目并行资源怎么和项目挂钩

提问者:fukua 问题分类:其他问题
如果多项目复用服务器:1.如何按项目分配资源(存储、HPC(LSF集群)),2.如何按项目监控资源利用率。
1 个回答
团子精英
团子精英 管理员
首先用esub将-P project设置为必须项。
其次,可以使用独立queue和混合queue来实现项目资源复用
提前规划好各项目的资源,然后采用集合的方式来分配计算节点
独立分配是
{1,2,3,4,}和{5,6,7,8}
混合分配是
{1,2,3,4}和{5,6,7,8}和{3,4,5,6}
同时,也可以通过对license options的限制来分配资源。尤其是当计算资源不是特别充足的时候。
通过对feature功能/数量的分配,限制各项目/人员最大的资源使用
至于对资源的监控,目前有一些比较成熟的开源和收费方案
同时也可以使用epsub和esub配合,将每个job的资源使用情况写入数据库,手工进行分析。
发布于:1年前 (2024-06-26) IP属地:北京市
我来回答