【金猿技术展】任务调度——更具效率的调度方法

【金猿技术展】任务调度——更具效率的调度方法
2024年11月14日 10:02 数据猿

极道科技技术

该技术由极道科技投递并参与“数据猿年度金猿策划活动——2024大数据产业年度创新技术突破榜单及奖项”评选。

本发明公开的任务调度方法,涉及计算机技术领域,根据优先级从大到小的顺序,遍历处于各个优先级队列,计算优先级队列的限流参数alpha,计算当前优先级队列中的可调度任务数allowed‑schedule‑num,根据当前优先级队列中的可调度任务数allowed‑schedule‑num,向目标系统提交任务,简化了调度难度,适用于多种场景,提高了调度的有效性。

技术说明

本发明是针对在集群中众多计算任务所设计的,该方法打破了优先级从大到小的顺序,可以根据用户实际需要调度的任务进行投递,即向目标系统提交任务,从而简化了调度难度,让计算效率更快。

本发明用在了极道自研的融合算力平台Achelous中,该产品是极道自主研发的集群管理系统,在资源整合的基础上实现策略化调度。可以将多种异构计算资源(例如CPU、内存、GPU、FPGA等)组成超大资源池,统一调度。这些虚拟资源(计算节点、 CPU、GPU等等)可以任意组合,成为调度域。调度域承载用户的应用和计算任务,具备丰富的调度策略,支持资源配额、资源预留、弹性预留、任务优先级和用户访问权限等等, 既保证资源利用率,又兼顾多元化的计算需求。

开发团队

·带队负责人姓名:张京城

张京城,毕业于清华大学计算机科学,专业硕士。曾任EMC统一存储,高级工程师,作为核心开发工程师参与设计实现了VNX多核RAID ( MCR);作为核心设计师设计了EMC NEO Trin产品线。曾任EMC Lab研究员,从事虚拟化安全技术的研究。曾任百度基础架构部架构师,主持设计百度数据中心宽带网络调度系统。拥有美国发明专利1篇,中国专利2篇。

团队其他重要成员姓名:吴江(Javen Wu)

·隶属机构:极道科技

极道科技成立于2015年,作为国内首家存算协同的分布式系统厂商,创新的将数据“存管算”统一协同设计,实现了数据感知,应用感知和数据智能。自主研发的分布式存储系统、非结构化数据系统以及融合统一计算系统已经为高性能计算、人工智能、AIGC等多种新型业务场景提供支撑,并广泛应用于生命科学、科研教育、能源、航天航空等泛高性能计算行业。

相关评价

在实际合作中,极道科技提供的系统不仅运行稳定,而且高效,为我们的研究工作提供了强大支持,并且工程师团队在解决问题时的专业素养和响应速度令人赞叹,确保我们的工作不受影响。我们愿意与极道科技持续合作,共同推进我们的研究室也不断向前发展。

——北京吉因加科技有限公司CIO 陈永胜

数据存储是我们非常看好的领域之一。随着数字化、新基建的推进,越来越多的商业都会进行数字化的建设与转型。数据存储作为新基建的重要环节,也必将迎来新一轮的爆发期。我们希望公司借助此次融资,抓住市场机遇,更上一个台阶。

——无锡巢生投资有限责任公司董事长 董晓栗

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部