7. 关键检验指标#

性能相关指标需作为关键检验项贯穿阶段 3-6: 阶段 3 关注算子性能,阶段 4a 关注通信吞吐与线性度,阶段 4b 关注训练/推理精度与端到端表现;进入高级合作、Day 0、发行版或展厅展示计划前,应额外确认同等算力下相对 NVIDIA 基线的效率指标(X%,待 KT2期 口径确定)。

阶段

核心检验指标

通过标准

涉及硬件

阶段 0

MOU 签署

双方盖章生效

—

阶段 1

环境就绪

芯片被 OS + PyTorch 识别

开发板 1 台

阶段 2

Triton kernel 编译通过率

≥95%,CI 机器可用性 ≥99%

CI 1 台

阶段 3

FlagGems 算子测试通过率

≥80%,核心算子 100%

CI 1 台 + 调试机 1 台

阶段 4a

集合通信同构吞吐比

≥原生库 99%

2 台多卡集群

阶段 4b

模型精度偏差

<2%(相对 NVIDIA 基线)

复用 4a 设备

阶段 5

CTS 核心测试项通过

100% 或豁免获批

CI 1 台 + SVT 2 台

阶段 6

FlagRelease 上线模型数

≥10 个

FR 专机 1 台

高级合作

同等算力性能对标

运行效率达到 NVIDIA 同等算力基线 X%

多卡集群 / FR 专机 / CI