NVIDIA RTX 3090 Ti
GPU1
运行记录
1
覆盖模型
1
覆盖框架
L0 自报 × 1
证据分布
典型性能表现
同硬件上各模型 × 框架 × 量化的已上架实测均值。
- llama.cpp · Q5_K_S Decode 50.84 · Prefill 1376.9 ·
核心规格
- 显存
- 24 GB
运行记录
共 1 组配置
| 模型 | 框架 | 量化 | Decode | 样本数 |
|---|---|---|---|---|
| Qwen3.6-27B | llama.cpp | Q5_K_S | 50.8 tok/s | 1 |
1
运行记录
1
覆盖模型
1
覆盖框架
L0 自报 × 1
证据分布
同硬件上各模型 × 框架 × 量化的已上架实测均值。
共 1 组配置
| 模型 | 框架 | 量化 | Decode | 样本数 |
|---|---|---|---|---|
| Qwen3.6-27B | llama.cpp | Q5_K_S | 50.8 tok/s | 1 |