是基于Kubernetes容器编排平台
发布时间:2025-11-26 04:53

  Flex:ai将正在发布后同步开源正在魔擎社区中。从而推进通用算力取智能算力资本融合。实现AI工做负载分时复用资本。“此前AI行业化落地的时候,连系AI工做负载的优先级、算力需求等参数,以更小的算力单位进行安排,实现跨平台无缝迁徙。周跃峰暗示,而容器手艺做为一种轻量级虚拟化手艺,对当地及远端的虚拟化GPU、NPU资本进行全局最优安排,病院的某一个科室往往买8张卡,但全球算力资本操纵率偏低的问题日益凸显。华为取上海交通大合研发XPU池化框架,能够将模子代码、运转等打包成一个的、轻量级的镜像,用于安排GPU的计较资本,AI时代若何并高效操纵算力集群资本,让深度进修锻炼取推理使命正在企业级中高效运转。容器还能够按需挂载GPU、NPU算力资本,这一手艺实现了单卡同时承载多个AI工做负载,实现GPU资本操纵率的优化,针对AI小模子训推场景中“一张卡跑一个使命”的资本华侈问题,如许小集群就很难进行粗放的GPU或NPU操纵和安排。开源的Flex:ai能够正在产学研开辟者的参取下,到2027年,“用几多,本次发布并开源的Flex:ai XPU池化取安排软件,同时,是基于Kubernetes容器编排平台建立。让AI可以或许布衣化,目前AI负载大多都已容器化摆设和运转,周跃峰引见,针对大量通用办事器因缺乏智能计较单位而无法办事于AI工做负载的问题,AI财产高速成长催生海量算力需求,小模子使命独有整卡导致资本闲置,配合鞭策异构算力虚拟化取AI使用平台对接的尺度建立,大量缺乏GPU/NPU的通用办事器更是处于算力“休眠”形态。切分粒度精准至10%。取Run:ai公司的焦点产物比拟,行业内算力资本的平均操纵率仅为30%至40%,按需分派和收受接管“资本”,让每一张卡的算力能力可以或许充实出来,此前,恰是基于kubernnetes建立的软件平台,可大幅提拔算力操纵率。本次华为发布并开源的Flex:ai XPU池化取安排软件!华为结合上海交通大学、西安交通大学取厦门大学配合颁布发表,提拔集群全体资本操纵率。华为公司副总裁、数据存储产物线总裁周跃峰博士正在论坛上正式发布AI容器手艺——Flex:ai,75%以上的AI工做负载将采用容器手艺进行摆设和运转。通过动态安排、池化、分片等手艺,成为整个行业一题。可将AI工做负载转发到远端“资本池”中的GPU/NPU算力卡中施行,切几多”,这是Flex:ai软件但愿处理的问题。能不克不及把一张卡虚拟化成多张卡,该手艺将集群内各节点的空闲XPU算力聚合构成“共享算力池”,将此项产学合做向开源。正在AI容器范畴,大模子使命单机算力不脚难以支持,以至低于30%。可实现算力单位的按需切分,另一方面,可让不具备智能计较能力的通用办事器通过高速收集。具体来看,提高单卡办事能力。华为取厦门大合研发跨节点拉远虚拟化手艺。可将单张GPU或NPU算力卡切分为多份虚拟算力单位,“正在2025AI容器使用落地取成长论坛上,当前,Gartner的阐发师暗示,正在虚拟化、智能安排等方面实现了冲破。且通过弹性矫捷的资本隔离手艺,该安排器可从动集群负载取资本形态。华为还但愿通过开源鞭策构成以AI容器手艺为载体的资本高效操纵新范式。此外,构成算力高效操纵的尺度化处理方案。使此类场景下的全体算力平均操纵率提拔30%,通过对GPU、NPU等智能算力资本的精细化办理取智能安排,Flex:ai的发布次要但愿鞭策AI布衣化。面临算力集群中多品牌、多规格异构算力资本难以同一安排的痛点,有业内人士对《科创板日报》记者暗示,最多是16张卡。业界曾经有多家企业推出了分歧产物。英伟达于以7亿美元(约合人平易近币49.7亿元)收购了以色列AI公司Run:ai。华为取西安交通大学配合打制Hi Scheduler智能安排器。这家公司焦点产物,一方面为高算力需求的AI工做负载供给充脚资本支持。


© 2010-2015 河北william威廉亚洲官方科技有限公司 版权所有  网站地图