商汤大装置分享AI原生云实践:如何提供可用、易用、高效的算力服务?
创始人
2026-04-05 00:08:10
0

智东西

作者 | ZeR0

编辑 | 漠影

智东西4月4日报道,近日,2026中关村论坛期间,在趋境科技与九源智能计算系统生态联合体共同主办的专题研讨会上,商汤大装置首席架构师项铁尧发表《商汤大装置AI原生云基础设施探索与实践》主题演讲,系统阐述了商汤大装置对AI原生时代算力集群建设的前沿判断与实践路径,即如何将软硬件能力真正转化为客户可用、易用、高效的算力服务。

在他看来,当算力集群的发展进入AI原生时代,新的架构范式应具备统一的规范、极致弹性的扩缩容机制以及为大模型训练和推理深度优化的AI集群runtime。

一、AI算力池:面向角色、水平分层、资源自由流转

项铁尧从底层技术视角切入,指出Kubernetes(全球最流行的容器编排平台)正朝着AI方向发展。

随着动态资源分配(DRA)、Workload API与Gateway API三项核心新特性的引入,K8s逐渐从简单的容器编排工具,进化为AI时代的操作系统。这背后,其实是整个行业在加速从云原生集群时代向AI原生时代跃迁。

围绕上述转变过程,项铁尧重点介绍了商汤大装置前瞻打造的核心产品——AI算力池

AI算力池面向AI原生时代全新算力服务需求,采用“三明治”水平分层架构,从底层高度优化的计算网络存储基础设施,到中间层全新的虚拟集群技术,再到上层涵盖开发机、训练平台、部署平台及Agentic Engine的完整PaaS产品体系,杜绝不同产品之间的资源孤岛问题。

其中,大装置AI算力池具备三大优势:

1)面向角色。面对客户内部角色多元、需求复杂的现实,分别设计服务形态、提供差异化的解决方案。比如针对集群管理员与平台工程师提供高弹性虚拟集群资源;针对AI研究员,可提供丰富的脚本工具与高效研发环境等等。

2)水平分层。AI算力池采用“三明治”结构,杜绝产品间信息、资源孤岛的可能。

3)资源自由流转。用户只需购买一种通用算力形态,即可在虚拟机、虚拟集群、AI Code Space开发机等不同产品形态之间秒级自由切换,充分应对国内普遍存在的算力潮汐效应,大幅提升集群整体资源利用率。

二、虚拟集群实现秒级弹性扩缩容,三大自研套件护航超大规模AI训练与推理

值得一提的是,在底层Infra层,商汤大装置创新应用虚拟集群技术,解决了传统云托管服务中“数据面管理重、扩容慢”的痛点。

有别于主流云厂商仅托管控制面,数据面仍需用户自行管理的传统模式,全新的虚拟集群技术,实现了控制面与数据面的全量托管,扩缩容效率从传统方案的数分钟乃至数十分钟压缩至秒级,同时提供完全标准的K8s API,用户无需对现有代码做任何修改即可无缝接入。

在虚拟集群基础上,项铁尧进一步提出AI集群Runtime产品概念。

“要快速搭建一个离线混部、训练推理混合使用的集群非常复杂,因为现在AI新的技术层出不穷,各种组件之间协同优化同样复杂。”项铁尧指出,“为了解决这种难题,我们通过智能推荐、深度调优与版本锁定机制,帮助用户快速搭建复杂的在离线混部、训练推理混合使用集群,降低AI基础设施的使用门槛与运维复杂度。”

为了进一步满足超大规模AI生产场景的极致性能需求,商汤大装置还自研了三大套件:

1)SenseCore Scheduler:高性能调度器,支持复杂异构硬件的在离线混合调度。

2)容错引擎:解决超大规模训练中的不稳定性,实现故障自动检测与隔离。

3)Agentic Engine:针对不断涌现的Agent使用需求,进行深入优化,包括沙箱预热、快速启动、规划保持、状态快照等。

为了以更灵活的规格为客户提供算力资源,商汤大装置同步自研虚拟节点技术,它具备三大优势:

1)虚拟集群体系无缝集成;

2)提供相比于虚拟机更轻量级的使用体验以及更高效的性能;

3)提供相比于runc更好的安全性和隔离度。

结语:助推国产推理基础设施迭代

目前,商汤大装置已与趋境科技展开深度合作,为趋境科技自研的ATaaS高效能AI Token生产服务平台提供高性能、高可靠的算力支撑。

据了解,趋境ATaaS高效能AI Token生产服务平台可支撑万级别AI推理需求,并达到日均万亿级别Token整体产能。

在生态联盟层面,商汤大装置作为九源智能计算系统生态联合体理事单位,积极参与这一以”产学研用服”协同合作为核心模式的开放生态。该联合体聚焦国产智能计算系统建设、软件生态统一与技术成果转化,致力于构建自主可控的智能计算产业生态。

商汤大装置计划进一步联合生态伙伴,共同推动国产推理基础设施迭代升级,为我国人工智能产业高质量发展、新质生产力落地提供支撑。

相关内容

企业不与员工签订劳动合同 ...
  企业不与员工签订劳动合同 劳动关系竟成“合作关系”?  工资条...
2026-07-28 19:59:48
中国羽毛球公开赛:中国队夺...
中国羽毛球公开赛26日在江苏常州落幕,郭新娃/陈芳卉和刘圣书/谭宁...
2026-07-28 19:57:25
被助农故事打动 “健康家庭...
  7月26日,曾获评“2023年度福建省健康家庭”的黄巧樟、叶松...
2026-07-28 19:56:41
资阳民生村镇银行获批解散,...
北京商报讯(记者 宋亦桐)7月28日,四川金融监管局发布《关于资阳...
2026-07-28 17:50:02
拥有630万人口的达州,如...
封面新闻记者 曾业 “十五五”期间,达州如何发挥消费规模优势,持续...
2026-07-28 17:49:12
增速领跑一线城市,上半年广...
来源:界面新闻 界面新闻记者 | 张熹珑 5.8%。 这是广州交出...
2026-07-28 17:47:44
上海六批次土拍:远东宏信联...
观点网讯:7月28日,上海六批次出让3宗涉宅地入市出让,3宗宅地分...
2026-07-28 17:46:38
国债ETF平安(51102...
国债ETF平安(511020)成功纳入上交所融资融券标的,工具属性...
2026-07-28 17:46:23
零售商下场戳破年份酒泡沫!...
图源:盒马情报局 年份酒挤泡沫,轮到渠道商上场了。 日前,时代周报...
2026-07-28 17:45:57

热门资讯

企业不与员工签订劳动合同 劳动...   企业不与员工签订劳动合同 劳动关系竟成“合作关系”?  工资条、工作聊天记录 成关键证据  不少...
中国羽毛球公开赛:中国队夺得两... 中国羽毛球公开赛26日在江苏常州落幕,郭新娃/陈芳卉和刘圣书/谭宁分别为中国队夺得混双和女双金牌,陈...
被助农故事打动 “健康家庭”追...   7月26日,曾获评“2023年度福建省健康家庭”的黄巧樟、叶松颖家庭,被福州小哥吴夺红助农公益卖...
原创 特... 除非联邦法官干预,否则美国总统唐纳德·特朗普表示,政府将于9月1日开工,在距离白宫南草坪仅一英里的地...
改装高尔夫球车座垫选什么皮革?... 改装高尔夫球车座垫挑选皮革,核心要优先考量户外暴晒、雨水侵蚀、频繁摩擦、化学品消杀四大场景痛点。普通...
2026年中国国际象棋乙级联赛... 2026年中国国际象棋乙级联赛将于7月28日在浙江绍兴正式拉开战幕。作为通往甲级联赛的唯一通道,30...
舞步逐光,策马载誉!肇庆马术小... 7月25日至28日,广东省第十七届运动会竞技体育组马术项目比赛在广东省黄村体育训练中心国际马术场火热...
原创 7... 50分。 219分对169分。 安东内利带着这个数字进入夏休期。 但你可能没注意到另一组数字,奥迪...
牌局里的辩证法:掼蛋承载的东方... 编者按:作为本土普及度最高的智力竞技项目之一,掼蛋的价值远不止于牌桌娱乐。本文以2022版官方竞赛规...