Saltar al contenido
Voltarum Local LLM Hardware Guide

Hardware para ejecutar DeepSeek R1 (0528)

El modelo de razonamiento completo de 671B. A 4 bits solo cabe en un equipo: el Mac Studio de 512 GB.

Desarrollador
DeepSeek
Parámetros
671B (activos 37B)
Contexto máximo
160K tokens
Licencia
MIT

Ficha en Hugging FaceArchivos GGUFOllama: ollama run deepseek-r1:671b

Memoria necesaria

Datos

Pesos más caché de contexto más unos 1,5 GB del programa, según la cuantización y la longitud del contexto.

Cuantización8K tokens32K tokens128K tokens
Q4_K_M407 GB409 GB416 GB
Q8_0715 GB717 GB724 GB
FP161344 GB1346 GB1353 GB

Hardware que lo ejecuta

Estimación

0 plataformas pueden ejecutar DeepSeek R1 (0528) a Q4_K_M con un contexto de 32K tokens. Necesita unos 409 GB.

Nada de nuestro catálogo lo ejecuta con estos ajustes.

Pesos del modeloCaché de contexto (KV)ProgramaLímite utilizable (color = veredicto)

En parte en la RAM del sistemaSolo con parte del modelo en la RAM del sistema (20)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
RTX PRO 600096 GB
409 GB / 96 GB
—8565 US$
RTX PRO 500048 GB
409 GB / 48 GB
—4500 US$
Radeon AI PRO R970032 GB
409 GB / 32 GB
—1550 US$
Arc Pro B7032 GB
409 GB / 32 GB
—1268 US$
RTX 509032 GB
409 GB / 32 GB
—4329 US$
RTX PRO 450032 GB
409 GB / 32 GB
—2500 US$
RX 7900 XTX24 GB
409 GB / 24 GB
—1269 €
Arc Pro B6024 GB
409 GB / 24 GB
—599 US$
RTX 309024 GB
409 GB / 24 GB
—1340 US$
RTX 409024 GB
409 GB / 24 GB
—1599 US$
RTX PRO 400024 GB
409 GB / 24 GB
—1500 US$
RX 9060 XT 16 GB16 GB
409 GB / 16 GB
—349 US$
RX 9070 XT16 GB
409 GB / 16 GB
—759 US$
Arc Pro B5016 GB
409 GB / 16 GB
—349 US$
RTX 5060 Ti 16 GB16 GB
409 GB / 16 GB
—789 US$
RTX 5070 Ti16 GB
409 GB / 16 GB
—1190 US$
RTX 508016 GB
409 GB / 16 GB
—1830 US$
Arc B58012 GB
409 GB / 12 GB
—249 US$
RTX 3060 12 GB12 GB
409 GB / 12 GB
—329 US$
RTX 507012 GB
409 GB / 12 GB
—1010 US$

No tiene memoria suficienteNo tiene memoria suficiente (11)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
Mac Studio M5 Ultra512 GB
409 GB / 384 GB
—5499 US$
Ryzen AI Max+ PRO 495192 GB
409 GB / 159 GB
—7399 US$
Ryzen AI Max+ 395128 GB
409 GB / 115 GB
—2200 US$
Mac Studio M5 Max128 GB
409 GB / 96 GB
—2499 US$
Jetson AGX Thor128 GB
409 GB / 115 GB
—5499 US$
DGX Spark / GB10128 GB
409 GB / 115 GB
—5000 US$
Ryzen AI 9 HX 37096 GB
409 GB / 82 GB
——
Mac mini M5 Pro64 GB
409 GB / 48 GB
—1699 US$
Jetson AGX Orin 64GB64 GB
409 GB / 58 GB
—1999 US$
Mac mini M632 GB
409 GB / 21 GB
—899 US$
Jetson Orin Nano Super8 GB
409 GB / 6 GB
—399 US$

No compatibleNo compatible (2)

PlataformaConfiguración mínimaMemoriaTecho de velocidadPrecio desde
RK3588 (Orange Pi 5 Plus and others)32 GB———
Raspberry Pi AI HAT+ 28 GB——200 US$

Máximo teórico al generar texto: ancho de banda de la memoria dividido entre los bytes que se leen por token. En la práctica se suele alcanzar entre la mitad y tres cuartas partes.