Saltar al contenido
Voltarum Local LLM Hardware Guide

Hardware para ejecutar Qwen3 1.7B

Un modelo diminuto para asistentes de voz, clasificación y llamadas a herramientas sencillas. Funciona en HAT aceleradores.

Desarrollador
Alibaba (Qwen)
Parámetros
2B
Contexto máximo
40K tokens
Licencia
Apache 2.0

Ficha en Hugging FaceArchivos GGUFOllama: ollama run qwen3:1.7b

Memoria necesaria

Datos

Pesos más caché de contexto más unos 1,5 GB del programa, según la cuantización y la longitud del contexto.

Cuantización8K tokens32K tokens40K tokens
Q4_K_M3,5 GB6,4 GB7,3 GB
Q8_04,3 GB7,1 GB8 GB
FP165,9 GB8,7 GB9,6 GB

Hardware que lo ejecuta

Estimación

32 plataformas pueden ejecutar Qwen3 1.7B a Q4_K_M con un contexto de 32K tokens. Necesita unos 6,4 GB.

El más barato que lo ejecuta

El más rápido que lo ejecuta

Pesos del modeloCaché de contexto (KV)ProgramaLímite utilizable (color = veredicto)

FuncionaFunciona con holgura (32)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
RTX PRO 600096 GB
6,4 GB / 96 GB
≤ 1614 tok/s8565 US$
RTX 509032 GB
6,4 GB / 32 GB
≤ 1614 tok/s4329 US$
RTX PRO 500048 GB
6,4 GB / 48 GB
≤ 1211 tok/s4500 US$
Mac Studio M5 Ultra96 GB
6,4 GB / 72 GB
≤ 1081 tok/s5499 US$
RTX 409024 GB
6,4 GB / 24 GB
≤ 908 tok/s1599 US$
RX 7900 XTX24 GB
6,4 GB / 24 GB
≤ 865 tok/s1269 €
RTX 508016 GB
6,4 GB / 16 GB
≤ 865 tok/s1830 US$
RTX 309024 GB
6,4 GB / 24 GB
≤ 843 tok/s1340 US$
RTX PRO 450032 GB
6,4 GB / 32 GB
≤ 807 tok/s2500 US$
RTX 5070 Ti16 GB
6,4 GB / 16 GB
≤ 807 tok/s1190 US$
RTX PRO 400024 GB
6,4 GB / 24 GB
≤ 605 tok/s1500 US$
RTX 507012 GB
6,4 GB / 12 GB
≤ 605 tok/s1010 US$
Radeon AI PRO R970032 GB
6,4 GB / 32 GB
≤ 581 tok/s1550 US$
RX 9070 XT16 GB
6,4 GB / 16 GB
≤ 581 tok/s759 US$
Arc Pro B7032 GB
6,4 GB / 32 GB
≤ 548 tok/s1268 US$
Mac Studio M5 Max36 GB
6,4 GB / 24 GB
≤ 414 tok/s2499 US$
Arc Pro B6024 GB
6,4 GB / 24 GB
≤ 411 tok/s599 US$
Arc B58012 GB
6,4 GB / 12 GB
≤ 411 tok/s249 US$
RTX 5060 Ti 16 GB16 GB
6,4 GB / 16 GB
≤ 404 tok/s789 US$
RTX 3060 12 GB12 GB
6,4 GB / 12 GB
≤ 324 tok/s329 US$
RX 9060 XT 16 GB16 GB
6,4 GB / 16 GB
≤ 288 tok/s349 US$
Mac mini M5 Pro24 GB
6,4 GB / 16 GB
≤ 277 tok/s1699 US$
Ryzen AI Max+ PRO 495192 GB
6,4 GB / 159 GB
≤ 246 tok/s7399 US$
Jetson AGX Thor128 GB
6,4 GB / 115 GB
≤ 246 tok/s5499 US$
DGX Spark / GB10128 GB
6,4 GB / 115 GB
≤ 246 tok/s5000 US$
Ryzen AI Max+ 39564 GB
6,4 GB / 58 GB
≤ 231 tok/s2200 US$
Arc Pro B5016 GB
6,4 GB / 16 GB
≤ 202 tok/s349 US$
Jetson AGX Orin 64GB64 GB
6,4 GB / 58 GB
≤ 185 tok/s1999 US$
Mac mini M616 GB
6,4 GB / 11 GB
≤ 153 tok/s899 US$
Ryzen AI 9 HX 37032 GB
6,4 GB / 27 GB
≤ 108 tok/s—
RK3588 (Orange Pi 5 Plus and others)16 GB
6,4 GB / 14 GB
——
Raspberry Pi AI HAT+ 28 GB
6,4 GB / 8 GB
—200 US$

No tiene memoria suficienteNo tiene memoria suficiente (1)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
Jetson Orin Nano Super8 GB
6,4 GB / 6 GB
—399 US$

Máximo teórico al generar texto: ancho de banda de la memoria dividido entre los bytes que se leen por token. En la práctica se suele alcanzar entre la mitad y tres cuartas partes.