国产Apache 2.0

Qwen3.5-9B

Qwen3.5 9B,单卡消费级 GPU 可跑,原生多模态,性能超越 120B 级模型

Alibaba·9B 参数·Dense·发布于 2026-03

你的硬件评估

正在检测硬件...
未知
参数量

9B

上下文长度

256K tokens

架构

Dense

最低显存

5.5 GB

Q4_K_M 量化

量化选项

4 种

适用场景

对话推理多模态

量化版本对比

格式位宽所需显存质量预估速度状态
Q4_K_M4-bit5.5 GB
良好
未知
Q6_K6-bit7.1 GB
优秀
未知
Q8_08-bit9.3 GB
优秀
未知
F1616-bit18 GB
无损
未知

显存需求一览

Q4_K_M
5.5 GB
Q6_K
7.1 GB
Q8_0
9.3 GB
F16
18 GB

资源链接

推荐硬件配置

Q4_K_M建议 ≥ 7 GB 显存(模型 5.5 GB + 15% 余量)
Q6_K建议 ≥ 9 GB 显存(模型 7.1 GB + 15% 余量)
Q8_0建议 ≥ 11 GB 显存(模型 9.3 GB + 15% 余量)
F16建议 ≥ 21 GB 显存(模型 18 GB + 15% 余量)