国产MoEApache 2.0

Qwen3.5-35B-A3B

Qwen3.5 高效 MoE,35B 总参数仅激活 3B,256 专家,性能超越上代 235B 旗舰

Alibaba·35B 参数·MoE·发布于 2026-02

你的硬件评估

正在检测硬件...
未知
参数量

35B

激活 3B

上下文长度

256K tokens

架构

MoE

35B 总参数

最低显存

14 GB

Q4_K_M 量化

量化选项

3 种

适用场景

对话推理多模态

量化版本对比

格式位宽所需显存质量预估速度状态
Q4_K_M4-bit14 GB
良好
未知
Q6_K6-bit19 GB
优秀
未知
Q8_08-bit25 GB
优秀
未知

显存需求一览

Q4_K_M
14 GB
Q6_K
19 GB
Q8_0
25 GB

资源链接

💡 关于 MoE 架构

Qwen3.5-35B-A3B 采用 Mixture of Experts (MoE) 架构,总参数量为 35B, 但每次推理仅激活 3B 参数。虽然推理计算量较小, 但完整模型权重仍需全部加载到显存中,因此显存需求按总参数量计算。 实际推理速度会比同等显存占用的 Dense 模型更快。

推荐硬件配置

Q4_K_M建议 ≥ 17 GB 显存(模型 14 GB + 15% 余量)
Q6_K建议 ≥ 22 GB 显存(模型 19 GB + 15% 余量)
Q8_0建议 ≥ 29 GB 显存(模型 25 GB + 15% 余量)