Kimi K3 2.8T · 每美元性能

Kimi K3 2.8T — H200 vs MI355X 每美元性能

H200NVIDIA Hopper)与 MI355XAMD CDNA 4)在 Kimi K3 2.8T 上的每百万 token 成本。基于所属云服务商 TCO 归一化的输出 token 性能——在各类 LLM 工作负载下的每美元性能。在每个目标交互性水平下选出更经济的 SKU。使用下方图表控件切换序列、精度和指标——交互方式与主推理图表相同。

AgentX 回放真实的编码 agent 会话,而不是固定长度的 prompt,因此上下文随轮次不断增长,每个请求的大部分内容由 cache 提供而无需重新计算。这让对比变成一个系统问题:跨节点的 KV 传输、prefix 感知路由与 cache 容量,都会与芯片原始吞吐量一同影响曲线。固定序列负载仍然是衡量 kernel 与芯片性能的干净基线,因此两种场景回答的是关于同一硬件的不同问题。 进一步了解 AgentX

MI355X 在 Kimi K3 2.8T 上以 29 tok/s/user 运行时领先于 H200——每百万 token 成本 $0.09 对 $4.85,差距达 5202%。

将 Kimi K3 2.8T 推至 57 tok/s/user 时,H200 每百万 token 成本为 $4.85,MI355X 为 $0.14——MI355X 领先 3281%。

H200:每百万 token $4.85。MI355X:$0.21。均在 Kimi K3 2.8T 上以 84 tok/s/user 运行,MI355X 便宜 2180%。 (数据反映此 URL 的默认 agentic-traces · fp4 选择——如果您在控件中更改序列、精度或模型,下方表格和图表会自动更新。)

芯片定价(所属云服务商): H200 $1.22/chip/hr · MI355X $1.50/chip/hr. 来源: SemiAnalysis Market July 2026 Pricing Surveys & AI Cloud TCO Model.

查看完整延迟与吞吐量对比 →

Kimi K3 2.8T:H200 与 MI355X 在相同交互性水平下的每百万 token 成本
H200 与 MI355X 在此对比默认工作负载下的每百万 token 成本。成本越低表示每美元性能越高。
Interpolated from real benchmark data. Edit target interactivity values below to compare at different operating points.
Metric
Interactivity (tok/s/user)
Interactivity (tok/s/user)
Interactivity (tok/s/user)
每百万 token 美元成本
H200:$4.850MI355X:$0.091
H200:$4.850MI355X:$0.143
H200:$4.850MI355X:$0.213
Concurrency
H200:~1MI355X:~10
H200:~1MI355X:~6
H200:~1MI355X:~3

推理性能

不同模型、硬件配置和服务参数下,来自 AgentX 场景的智能体推理指标与固定序列推理指标。