返回搜索结果

Qwen3.8-27B · NVFP4

发起讨论
NVIDIA RTX 5090 Laptop24GBllama.cpp b10915L1 已复现

本页汇总 Qwen3.8-27B(NVFP4)在 NVIDIA RTX 5090 Laptop 上以 llama.cpp 运行的 1 次实测数据,来自 1 个独立来源平台;指标为已上架实测的均值。

77.1 tok/s

Decode

解码速度

32.7 tok/s

Prefill

预填充速度

— s

TTFT

首 token 延迟

— GB

VRAM

显存占用

L1 已复现

1

实测次数

1

独立来源

GitHub

来源平台

昨天

最后验证

性能表现

  1. llama.cpp · NVFP4 (当前)Decode 77.1 · Prefill 32.7 ·

核心数据

Decode(平均)
77.1 tok/s
Prefill(平均)
32.7 tok/s
TTFT(平均)
— s
VRAM(平均)
— GB
MTP 接受率
—
TTFB
— GB
功耗
— W

基础配置

成员级字段取自最近一次实测

模型
Qwen3.8-27B
量化方式
NVFP4
框架
llama.cpp
版本
b10915

硬件信息

标称与实测并排陈列,能否运行由读者自判

GPU
NVIDIA RTX 5090 Laptop
标称显存
24 GB
系统
Windows 11

获取与上手

原始模型资料

以下为基础模型入口,不保证与本次量化版本一致;部署请使用上方已核实权重。

来源与证据

共 1 条实测记录,逐条可回溯到原始出处

  1. L1 已复现GitHub原始链接 验证于 2026-10-02

    b10915 · Windows 11

    77.1 tok/s

    Decode

    32.7 tok/s

    Prefill

    — s

    TTFT

    0 GB

    VRAM

    —

    MTP

    — W

    功耗

    self-compiled + MTP | 32.7 tok/s | 77.1 tok/s; self-compiled, MTP disabled | 1867.5 tok/s | 39.3 tok/s