MiniMax M3 428B · GPU 对比

MiniMax M3 428B — GB300 NVL72 vs MI325X

GB300 NVL72NVIDIA Blackwell)与 MI325XAMD CDNA 3)在 MiniMax M3 428B 上的正面 AI 推理基准测试对比。涵盖各类 LLM 工作负载的延迟、吞吐量与成本。使用下方图表控件切换序列、精度和指标——交互方式与主推理图表相同。

GB300 NVL72 在 MiniMax M3 428B 上以 45 tok/s/user 运行时达到 2751 tok/s/GPU(每百万 token $0.26);MI325X 达到 672 tok/s/GPU($0.53)。GB300 NVL72 每 token 成本低 104%;GB300 NVL72 每 GPU 吞吐量高出 309%。

MiniMax M3 428B 在 83 tok/s/user 交互性下的吞吐量:GB300 NVL72 为 780 tok/s/GPU,MI325X 为 251。每百万 token 成本分别为 $0.97 和 $1.39。GB300 NVL72 每 token 成本低 44%;GB300 NVL72 每 GPU 吞吐量高出 210%。

GB300 NVL72 / MI325X 在 MiniMax M3 428B 上以 121 tok/s/user 运行:266 / 145 tok/s/GPU,$2.73 / $2.42 每百万 token。MI325X 每 token 成本低 12%;GB300 NVL72 每 GPU 吞吐量高出 84%。 (数据反映此 URL 的默认 1k/1k · fp8 选择——如果您在控件中更改序列、精度或模型,下方表格和图表会自动更新。)

查看每美元性能对比 →

Interpolated from real benchmark data. Edit target interactivity values below to compare at different operating points.
Metric
Interactivity (tok/s/user)
Interactivity (tok/s/user)
Interactivity (tok/s/user)
Throughput (tok/s/gpu)
GB300 NVL72:2751.0MI325X:672.5
GB300 NVL72:779.7MI325X:251.4
GB300 NVL72:266.0MI325X:144.9
Cost ($/M tok)
GB300 NVL72:$0.260MI325X:$0.528
GB300 NVL72:$0.968MI325X:$1.393
GB300 NVL72:$2.726MI325X:$2.423
tok/s/MW
GB300 NVL72:1309992MI325X:308466
GB300 NVL72:371264MI325X:115330
GB300 NVL72:126643MI325X:66454
Concurrency
GB300 NVL72:~756MI325X:~67
GB300 NVL72:~92MI325X:~13
GB300 NVL72:~23MI325X:~5

推理性能

不同模型、硬件配置和服务参数下的推理性能指标。

厂商:
聚合模式:
投机解码: