MiniMax M3 428B · GPU 对比

MiniMax M3 428B — H100 vs MI355X

H100NVIDIA Hopper)与 MI355XAMD CDNA 4)在 MiniMax M3 428B 上的正面 AI 推理基准测试对比。涵盖各类 LLM 工作负载的延迟、吞吐量与成本。使用下方图表控件切换序列、精度和指标——交互方式与主推理图表相同。

MiniMax M3 428B 在 76 tok/s/user 交互性下的吞吐量:H100 为 537 tok/s/GPU,MI355X 为 1938。每百万 token 成本分别为 $0.67 和 $0.21。MI355X 每 token 成本低 217%;MI355X 每 GPU 吞吐量高出 261%。

H100 / MI355X 在 MiniMax M3 428B 上以 138 tok/s/user 运行:237 / 878 tok/s/GPU,$1.52 / $0.47 每百万 token。MI355X 每 token 成本低 224%;MI355X 每 GPU 吞吐量高出 271%。

在 15–260 tok/s/user 交互性区间的高端,即 MiniMax M3 428B 上以 199 tok/s/user 运行时:H100 达到 157 tok/s/GPU($2.31/百万 token),MI355X 达到 510($0.79/百万)。MI355X 每 token 成本低 192%;MI355X 每 GPU 吞吐量高出 226%。 (数据反映此 URL 的默认 1k/1k · fp8 选择——如果您在控件中更改序列、精度或模型,下方表格和图表会自动更新。)

查看每美元性能对比 →

Interpolated from real benchmark data. Edit target interactivity values below to compare at different operating points.
Metric
Interactivity (tok/s/user)
Interactivity (tok/s/user)
Interactivity (tok/s/user)
Throughput (tok/s/gpu)
H100:536.7MI355X:1937.8
H100:236.6MI355X:877.6
H100:156.6MI355X:510.1
Cost ($/M tok)
H100:$0.673MI355X:$0.212
H100:$1.518MI355X:$0.468
H100:$2.307MI355X:$0.791
tok/s/MW
H100:310239MI355X:731262
H100:136749MI355X:331185
H100:90500MI355X:192490
Concurrency
H100:~31MI355X:~55
H100:~8MI355X:~14
H100:~4MI355X:~6

推理性能

不同模型、硬件配置和服务参数下的推理性能指标。

厂商:
聚合模式:
投机解码: