计算编排系统

新一代电子信息
所处阶段 小试
所属城市 山东
转化方式 不详
所属单位 山东省计算中心(国家超级计算济南中心)

成果简介

项目基本情况及核心技术介绍:计算编排系统具备计算任务编排、计算资源编排、计算数据编排三大核心功能,同时具有完善的计算资源统计和分析的功能,以及作业监控功能,结合计算仓库实现科学计算软件的一键部署功能。资源层面上,对于用户,操作界面简单,使用门槛低,可选择的计算资源更多,不需要担心个别结点资源故障或者排队过长而影响科研进度;功能层面上,编排系统在作业调度中起到双方面作用,一方面把作业调度到一个“合适”的高性能计算资源上提交执行,另一方面为高性能计算资源选取到 “合适”的作业执行。数据传输主要是针对业务计算数据的传输,为用户提供多种方式,优雅快捷的传输数据。
产业上下游情况:全球算力规模不断增大。2020 年全球算力总规模达到429EFlops,增速达到 39%,据 IDC 预测数据,2025 年全球物联网设备数将超过 400 亿台,产生数据量接近 80 ZB,且超过一半的数据需要依赖终端或者边缘的计算能力进行处理。预估未来五年全球算力规模将以超过 50%的速度增长,到 2025 年整体规模将达到 3300 EFlops。据中国信通院测算:从投入产出看,2020 年我国算力产业规模达 2 万亿元,直接带动经济产出 1.7万亿元,间接带动经济产出 6.3 万亿元,即在算力产业中每投入 1 元,平均将带动 3-4 元的经济产出。
目前行业内已经存在并行科技超算云、北鲲云等高性能计算服务商,还有阿里云、腾讯云等云服务商也推出了高性能计算业务,在 C 端已经占据了大量市场份额;在 B 端目前主要商业模式为需求企业和算力提供者(超算中心)对接,研发定制业务系统满足用户需求。整个算力市场,仅有 40%的用户使用第三方算力资源(如超算中心、云服务商),绝大多数用户通过自行采购设备、自建高性能计算集群的方式满足自身算力需求,包括高校实验室工作站集群、企业小规模服务器集群等。

应用场景

不详