商汤大装置分享AI原生云实践:如何提供可用、易用、高效的算力服务?
创始人
2026-04-05 00:08:10
0

智东西

作者 | ZeR0

编辑 | 漠影

智东西4月4日报道,近日,2026中关村论坛期间,在趋境科技与九源智能计算系统生态联合体共同主办的专题研讨会上,商汤大装置首席架构师项铁尧发表《商汤大装置AI原生云基础设施探索与实践》主题演讲,系统阐述了商汤大装置对AI原生时代算力集群建设的前沿判断与实践路径,即如何将软硬件能力真正转化为客户可用、易用、高效的算力服务。

在他看来,当算力集群的发展进入AI原生时代,新的架构范式应具备统一的规范、极致弹性的扩缩容机制以及为大模型训练和推理深度优化的AI集群runtime。

一、AI算力池:面向角色、水平分层、资源自由流转

项铁尧从底层技术视角切入,指出Kubernetes(全球最流行的容器编排平台)正朝着AI方向发展。

随着动态资源分配(DRA)、Workload API与Gateway API三项核心新特性的引入,K8s逐渐从简单的容器编排工具,进化为AI时代的操作系统。这背后,其实是整个行业在加速从云原生集群时代向AI原生时代跃迁。

围绕上述转变过程,项铁尧重点介绍了商汤大装置前瞻打造的核心产品——AI算力池

AI算力池面向AI原生时代全新算力服务需求,采用“三明治”水平分层架构,从底层高度优化的计算网络存储基础设施,到中间层全新的虚拟集群技术,再到上层涵盖开发机、训练平台、部署平台及Agentic Engine的完整PaaS产品体系,杜绝不同产品之间的资源孤岛问题。

其中,大装置AI算力池具备三大优势:

1)面向角色。面对客户内部角色多元、需求复杂的现实,分别设计服务形态、提供差异化的解决方案。比如针对集群管理员与平台工程师提供高弹性虚拟集群资源;针对AI研究员,可提供丰富的脚本工具与高效研发环境等等。

2)水平分层。AI算力池采用“三明治”结构,杜绝产品间信息、资源孤岛的可能。

3)资源自由流转。用户只需购买一种通用算力形态,即可在虚拟机、虚拟集群、AI Code Space开发机等不同产品形态之间秒级自由切换,充分应对国内普遍存在的算力潮汐效应,大幅提升集群整体资源利用率。

二、虚拟集群实现秒级弹性扩缩容,三大自研套件护航超大规模AI训练与推理

值得一提的是,在底层Infra层,商汤大装置创新应用虚拟集群技术,解决了传统云托管服务中“数据面管理重、扩容慢”的痛点。

有别于主流云厂商仅托管控制面,数据面仍需用户自行管理的传统模式,全新的虚拟集群技术,实现了控制面与数据面的全量托管,扩缩容效率从传统方案的数分钟乃至数十分钟压缩至秒级,同时提供完全标准的K8s API,用户无需对现有代码做任何修改即可无缝接入。

在虚拟集群基础上,项铁尧进一步提出AI集群Runtime产品概念。

“要快速搭建一个离线混部、训练推理混合使用的集群非常复杂,因为现在AI新的技术层出不穷,各种组件之间协同优化同样复杂。”项铁尧指出,“为了解决这种难题,我们通过智能推荐、深度调优与版本锁定机制,帮助用户快速搭建复杂的在离线混部、训练推理混合使用集群,降低AI基础设施的使用门槛与运维复杂度。”

为了进一步满足超大规模AI生产场景的极致性能需求,商汤大装置还自研了三大套件:

1)SenseCore Scheduler:高性能调度器,支持复杂异构硬件的在离线混合调度。

2)容错引擎:解决超大规模训练中的不稳定性,实现故障自动检测与隔离。

3)Agentic Engine:针对不断涌现的Agent使用需求,进行深入优化,包括沙箱预热、快速启动、规划保持、状态快照等。

为了以更灵活的规格为客户提供算力资源,商汤大装置同步自研虚拟节点技术,它具备三大优势:

1)虚拟集群体系无缝集成;

2)提供相比于虚拟机更轻量级的使用体验以及更高效的性能;

3)提供相比于runc更好的安全性和隔离度。

结语:助推国产推理基础设施迭代

目前,商汤大装置已与趋境科技展开深度合作,为趋境科技自研的ATaaS高效能AI Token生产服务平台提供高性能、高可靠的算力支撑。

据了解,趋境ATaaS高效能AI Token生产服务平台可支撑万级别AI推理需求,并达到日均万亿级别Token整体产能。

在生态联盟层面,商汤大装置作为九源智能计算系统生态联合体理事单位,积极参与这一以”产学研用服”协同合作为核心模式的开放生态。该联合体聚焦国产智能计算系统建设、软件生态统一与技术成果转化,致力于构建自主可控的智能计算产业生态。

商汤大装置计划进一步联合生态伙伴,共同推动国产推理基础设施迭代升级,为我国人工智能产业高质量发展、新质生产力落地提供支撑。

相关内容

原创 ...
说到我国近代史,许多人都会感到一种深深的痛惜与敬意。在那个动荡的时...
2026-04-05 02:19:02
原创 ...
新疆,古称西域。提起这里,人们脑海中总会浮现雪山、草原与驼铃。但一...
2026-04-05 02:17:40
原创 ...
很多人对历史的认知,多半来自于古装电视剧。不可否认,如果是那些严肃...
2026-04-05 02:17:03
原创 ...
提到曾国藩,很多人都知道他是晚清四大名臣之首,平定了太平天国之乱。...
2026-04-05 02:16:58
原创 ...
唐高宗李治常被误解为优柔寡断的“妻管严”,实则他是大唐顶尖猎人,终...
2026-04-05 02:16:10
原创 ...
前言 唐朝是中华历史长河中一颗璀璨的明珠,其统治时期不仅政治稳固、...
2026-04-05 02:15:29
原创 ...
#历史开讲# 郭嘉不死,卧龙不出。 这句评语,像一枚沉甸甸的...
2026-04-05 02:14:20
原创 ...
毛泽东主席曾十七次批注《资治通鉴》,评价道:“一将功成万骨枯,读史...
2026-04-05 02:13:36
遇“箭”铜川·青春闪耀——...
4月7日—13日,以遇“箭”铜川·青春闪耀为主题的2026年陕西省...
2026-04-05 02:11:39

热门资讯

美军一天两次坠机,如何发生的? 美国两架战机4月3日先后坠毁,美军飞行员当中的两人已获救,另一名飞行员目前下落不明。这两起坠机事件如...
原创 韩... 奥运的余韵尚未消退,韩国短道速滑国家队选拔赛却因门票收费问题引发了激烈的讨论。随着男子领军选手黄大宪...
原创 如... 作者:黎荔 如果我是一只非洲蜜獾,我会先纠正人类的一个误会——他们叫我“平头哥”,仿佛我头顶那撮白...
带货优思益再次翻车,让人如何信... 亟须反思的是,假洋牌为何总能一路绿灯? ▲多位明星网红都曾为优思益直播带货。图/第一财经 文| 信...
爬茶山 送健康 来源:滚动播报 (来源:工人日报) 日前,浙江湖州长兴县15万亩春茶进入采摘期。长兴县夹浦镇卫生院联...
怎样选到口碑好的陶瓷柴窑茶具 柴窑茶具的魅力 柴窑茶具以独特的烧制方式,赋予茶具别样的质感和韵味。柴窑烧制过程中,火焰和灰烬与茶具...
全场最低评分小麦3.0,如果加... 全场最低评分小麦3.0,如果加上教练评分,老林能超过这个数字吗?
商汤大装置分享AI原生云实践:... 智东西 作者 | ZeR0 编辑 | 漠影 智东西4月4日报道,近日,2026中关村论坛期间,在趋境...