NVIDIA RTX PRO 4000 Blackwell
GPUBlackwell 架构；24GB 显存，带宽 672 GB/s，TDP 145W，CUDA 核心 8,960。发布日期：2025-03-18。来源：LCZ 硬件知识库，缺项经 NVIDIA 官方资料补充。
4
运行记录
1
覆盖模型
2
覆盖框架
L0 自报 × 4
证据分布
典型性能表现
同硬件上各模型 × 框架 × 量化的已上架实测均值。
- SGLang · IQ2_XS Decode 2.1 · Prefill 15.8 ·
- SGLang · IQ3_S Decode 1.8 · Prefill 13.5 ·
- vLLM · IQ2_XS Decode 2.2 · Prefill 16.5 ·
- vLLM · IQ3_S Decode 1.8 · Prefill 13.5 ·
核心规格
- 厂商
- NVIDIA
- 架构
- Blackwell
- 显存
- 24 GB
- 显存带宽
- 672 GB/s
- TDP 功耗
- 145 W
- 发布日期
- 2025-03-18
运行记录
共 4 组配置
| 模型 | 框架 | 量化 | Decode | 生成耗时 | 样本数 |
|---|---|---|---|---|---|
| DeepSeek-V4.1-Flash | SGLang | IQ2_XS | 2.1 tok/s | — | 1 |
| DeepSeek-V4.1-Flash | SGLang | IQ3_S | 1.8 tok/s | — | 1 |
| DeepSeek-V4.1-Flash | vLLM | IQ2_XS | 2.2 tok/s | — | 1 |
| DeepSeek-V4.1-Flash | vLLM | IQ3_S | 1.8 tok/s | — | 1 |