gemma-4-E2B-it · Q4_K_M
L0 自报NVIDIA RTX 5060 SUPER · 12GB · llama.cpp
其他
今天
— tok/s
Decode
— tok/s
Prefill
— s
TTFT
— GB
VRAM
配置(最近一次实测)
Linux CUDA 12.6 Q4_K_M llama.cpp b4200 Flash Attention
来源:其他 · 1 次实测 · 1 个独立来源
计数为运行配置组合(模型 + 硬件 + 框架 + 量化的聚合),同一组合的多次实测已合并;原始次数见各结果的来源行。
NVIDIA RTX 5060 SUPER · 12GB · llama.cpp
其他
今天
— tok/s
Decode
— tok/s
Prefill
— s
TTFT
— GB
VRAM
来源:其他 · 1 次实测 · 1 个独立来源
NVIDIA RTX 5070 · 12GB · llama.cpp
其他
今天
— tok/s
Decode
— tok/s
Prefill
— s
TTFT
— GB
VRAM
来源:其他 · 1 次实测 · 1 个独立来源
NVIDIA RTX 3060 12GB · 12GB · llama.cpp
其他
今天
— tok/s
Decode
— tok/s
Prefill
— s
TTFT
— GB
VRAM
来源:其他 · 1 次实测 · 1 个独立来源
共 3 条结果