Roda Local

Modelos / Qwen 3.5

Qwen 3.5 27B

Versão densa grande do Qwen 3.5. Cabe em 24 GB com contexto moderado.

Parâmetros
27.8B
Contexto máximo
256K
Placa mínima
20 GB de VRAM
Mac mínimo
32 GB

Alibaba · licença apache-2.0 · mínimos com Q4_K_M e 8K de contexto

Rodar no Ollama

  • Q4_K_M
    ollama run qwen3.5:27b
  • Q8_0
    ollama run qwen3.5:27b-q8_0
  • FP16
    ollama run qwen3.5:27b-bf16

Quanta memória precisa

Total com pesos, KV cache, visão e runtime, por quantização e contexto.

Quantização4K8K32K128K
Q4_K_M18,3 GB18,6 GB20,7 GB29,2 GB
Q5_K_M21 GB21,4 GB23,5 GB31,9 GB
Q8_030,5 GB30,9 GB33 GB41,4 GB
FP1656 GB56,4 GB58,5 GB66,9 GB

Placas que rodam

Macs

  • M5a partir de 32 GB · ≈ 6,5 tok/s
  • M5 Proa partir de 48 GB · ≈ 13 tok/s
  • M5 Maxa partir de 36 GB · ≈ 15 tok/s
  • M4a partir de 32 GB · ≈ 5,1 tok/s
  • M4 Proa partir de 48 GB · ≈ 12 tok/s
  • M4 Maxa partir de 36 GB · ≈ 14 tok/s

Arquitetura

  • 64 camadas, 4 cabeças de KV de 256 dimensões.
  • 48 camadas usam atenção linear, com estado fixo; só 16 guardam KV.
  • Cada token de contexto ocupa cerca de 64 KB de KV cache em F16.

Fontes: config.json · arquivo de pesos · atualizado em 16/10/2026

Mesma família

Qwen 3.5 4B · Qwen 3.5 9B · Qwen 3.5 35B-A3B