Saltar al contenido
Voltarum Local LLM Hardware Guide

Hardware para ejecutar Qwen3.5 9B

El mejor modelo pequeño de 2026: su atención híbrida abarata los contextos largos y entiende imágenes.

Desarrollador
Alibaba (Qwen)
Parámetros
9,7B
Contexto máximo
256K tokens
Licencia
Apache 2.0

Ficha en Hugging FaceArchivos GGUFOllama: ollama run qwen3.5:9b

Memoria necesaria

Datos

Pesos más caché de contexto más unos 1,5 GB del programa, según la cuantización y la longitud del contexto.

Cuantización8K tokens32K tokens128K tokens
Q4_K_M7,4 GB8,3 GB11 GB
Q8_011 GB12 GB15 GB
FP1621 GB22 GB25 GB

Hardware que lo ejecuta

Estimación

31 plataformas pueden ejecutar Qwen3.5 9B a Q4_K_M con un contexto de 32K tokens. Necesita unos 8,3 GB.

El más barato que lo ejecuta

El más rápido que lo ejecuta

Pesos del modeloCaché de contexto (KV)ProgramaLímite utilizable (color = veredicto)

FuncionaFunciona con holgura (31)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
RTX PRO 600096 GB
8,3 GB / 96 GB
≤ 315 tok/s8565 US$
RTX 509032 GB
8,3 GB / 32 GB
≤ 315 tok/s4329 US$
RTX PRO 500048 GB
8,3 GB / 48 GB
≤ 237 tok/s4500 US$
Mac Studio M5 Ultra96 GB
8,3 GB / 72 GB
≤ 211 tok/s5499 US$
RTX 409024 GB
8,3 GB / 24 GB
≤ 177 tok/s1599 US$
RX 7900 XTX24 GB
8,3 GB / 24 GB
≤ 169 tok/s1269 €
RTX 508016 GB
8,3 GB / 16 GB
≤ 169 tok/s1830 US$
RTX 309024 GB
8,3 GB / 24 GB
≤ 165 tok/s1340 US$
RTX PRO 450032 GB
8,3 GB / 32 GB
≤ 158 tok/s2500 US$
RTX 5070 Ti16 GB
8,3 GB / 16 GB
≤ 158 tok/s1190 US$
RTX PRO 400024 GB
8,3 GB / 24 GB
≤ 118 tok/s1500 US$
RTX 507012 GB
8,3 GB / 12 GB
≤ 118 tok/s1010 US$
Radeon AI PRO R970032 GB
8,3 GB / 32 GB
≤ 113 tok/s1550 US$
RX 9070 XT16 GB
8,3 GB / 16 GB
≤ 113 tok/s759 US$
Arc Pro B7032 GB
8,3 GB / 32 GB
≤ 107 tok/s1268 US$
Mac Studio M5 Max36 GB
8,3 GB / 24 GB
≤ 81 tok/s2499 US$
Arc Pro B6024 GB
8,3 GB / 24 GB
≤ 80 tok/s599 US$
Arc B58012 GB
8,3 GB / 12 GB
≤ 80 tok/s249 US$
RTX 5060 Ti 16 GB16 GB
8,3 GB / 16 GB
≤ 79 tok/s789 US$
RTX 3060 12 GB12 GB
8,3 GB / 12 GB
≤ 63 tok/s329 US$
RX 9060 XT 16 GB16 GB
8,3 GB / 16 GB
≤ 56 tok/s349 US$
Mac mini M5 Pro24 GB
8,3 GB / 16 GB
≤ 54 tok/s1699 US$
Ryzen AI Max+ PRO 495192 GB
8,3 GB / 159 GB
≤ 48 tok/s7399 US$
Jetson AGX Thor128 GB
8,3 GB / 115 GB
≤ 48 tok/s5499 US$
DGX Spark / GB10128 GB
8,3 GB / 115 GB
≤ 48 tok/s5000 US$
Ryzen AI Max+ 39564 GB
8,3 GB / 58 GB
≤ 45 tok/s2200 US$
Arc Pro B5016 GB
8,3 GB / 16 GB
≤ 39 tok/s349 US$
Jetson AGX Orin 64GB64 GB
8,3 GB / 58 GB
≤ 36 tok/s1999 US$
Mac mini M616 GB
8,3 GB / 11 GB
≤ 30 tok/s899 US$
Ryzen AI 9 HX 37032 GB
8,3 GB / 27 GB
≤ 21 tok/s—
RK3588 (Orange Pi 5 Plus and others)16 GB
8,3 GB / 14 GB
——

No tiene memoria suficienteNo tiene memoria suficiente (1)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
Jetson Orin Nano Super8 GB
8,3 GB / 6 GB
—399 US$

No compatibleNo compatible (1)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
Raspberry Pi AI HAT+ 28 GB——200 US$

Máximo teórico al generar texto: ancho de banda de la memoria dividido entre los bytes que se leen por token. En la práctica se suele alcanzar entre la mitad y tres cuartas partes.