天数智芯天垓300实测对标H200,国产GPU接下来拼什么?

7x24快讯 2026-11-01 11:53 热度 1178 · 浏览 747
摘要
在实测场景中达到H200的性能水平后,国产GPU的竞争,开始进一步转向系统效率、软件适配与实际交付。本周的天数智芯媒体开放日上,最新一代天垓300与H200的实机对比,是最直观的性能展示。让GPU与专用芯片组成异构系统,是对推理效率的新探索。软件栈引入Agent与Skills,则试图解决客户部署、适配和优化的工程难题。天数智芯表示,今年完成的一组第三方测试中,在典型PD分离部署下,天垓300折算单
正文

在实测场景中达到H200的性能水平后,国产GPU的竞争,开始进一步转向系统效率、软件适配与实际交付。本周的天数智芯媒体开放日上,最新一代天垓300与H200的实机对比,是最直观的性能展示。让GPU与专用芯片组成异构系统,是对推理效率的新探索。软件栈引入Agent与Skills,则试图解决客户部署、适配和优化的工程难题。天数智芯表示,今年完成的一组第三方测试中,在典型PD分离部署下,天垓300折算单卡端到端吞吐达到H200的1.05倍。这表明国产通用GPU在特定高端推理负载中,已经拥有与H200直接竞争的性能基础。但从性能接近到客户采购,再到持续扩容,中间仍隔着系统效率、软件适配和稳定交付。当硬件具备竞争力,国产GPU怎样把这种能力转化为客户持续使用的理由?当推理催生更多专用芯片,通用GPU的独特价值是什么?从云端天垓300到端侧彤央系列,天数智芯也在拓展产品布局,将竞争延伸到不同形态的算力需求中。天垓300对比H200实测,性能小幅领先过去很长一段时间,峰值算力是国产AI芯片受到关注的重要指标。但对最终用户而言,设备每秒真正产出多少有效Token,比参数表上的理论算力更接近采购决策。天数智芯披露的第三方测试覆盖四大主流模型、三类场景。其中,1.05倍指典型PD分离部署下,折算单卡的整体端到端吞吐,反映的是特定模型与部署条件下的系统表现。另外,根据天数智芯性能实验室的数据,在GLM-5.3的64K长上下文场景下,保障同等用户体验时,天垓300的MoE吞吐达到H200的1.15倍。在8K至128K长上下文的Agent场景中,首字延迟较H200降低约10%至30%。前者关系到系统能够承接多少请求,后者关系到用户发出请求后需要等待多久,它们对应不同工作负载与性能指标。天垓300能够在这些场景中取得性能领先,一个关键是针对实际负载进行了架构优化。基于天枢架构的天垓300,单卡显存容量达到144GB,并围绕Attention、MoE等计算环节进行优化。长上下文需要容纳更多状态,也增加了Attention计算压力。MoE虽然通过激活部分专家控制计算量,却带来了小规模矩阵计算、专家分配和数据交换等新问题。为此,天垓300让Tensor Core与Vector Core并行处理Attention中的矩阵运算和Softmax等向量操作,同时针对MoE中的小规模矩阵、低精度计算与通信协同

×

登录后免费使用全部功能

注册即享所有功能免费使用,无次数限制,无任何门槛。

无限 AI 对话
Agent 源码免费下载
Skill/Prompt 免费复制
免费AI诊断 + 需求发布