NVIDIA RTX 5050

GPU

Blackwell 架构(GB207),8GB GDDR6 / 128-bit 位宽,显存带宽 320 GB/s,整卡功耗 130W,首发价 $249。入门级 8GB 卡:容量与带宽都低,本地推理基本只能跑 7B 以下的小模型量化版。

2

运行记录

1

覆盖模型

1

覆盖框架

L0 自报 × 2

证据分布

典型性能表现

同硬件上各模型 × 框架 × 量化的已上架实测均值。

  1. llama.cpp · Q5_K_M Decode 83.2 · Prefill 624 ·
  2. llama.cpp · Q4_K_M Decode 104 · Prefill 780 ·

核心规格

厂商
NVIDIA
架构
Blackwell
显存
8 GB
显存带宽
320 GB/s
TDP 功耗
130 W
发布日期
2025-07-01

运行记录

共 2 组配置

模型框架量化Decode生成耗时样本数
Qwen3.5-4Bllama.cppQ5_K_M83.2 tok/s—1
Qwen3.5-4Bllama.cppQ4_K_M104 tok/s—1