Ejecutar LLM localmente pasó de ser una «afición divertida» a convertirse en un «flujo de trabajo profesional esencial» en 2026. Las razones no son sutiles: los costos de las API en la nube se acumulan rápidamente, tus datos permanecen en tu equipo y la brecha entre los modelos de código abierto y los sistemas de clase GPT se ha reducido lo suficiente como para que la mayoría de los trabajos profesionales puedan realizarse con un Llama 3 de 70B o un Qwen 2.5 de 72B que caben en hardware de consumo.
La pregunta es: ¿qué hardware de consumo? Probamos todas las GPU que cualquiera recomienda seriamente en 2026 para LLM local trabajo, en la misma máquina y con la misma pila de software. Estos son los resultados —y los veredictos sinceros sobre cuál deberías comprar realmente.
Conclusiones clave
- Mejor en general: RTX 4090 (usada, 1.200–1.400 USD) — mejor equilibrio entre VRAM, velocidad y ecosistema en 2026.
- Mejor si el presupuesto no es una limitación: RTX 5090 (32 GB, 2.000 USD MSRP) — única GPU de consumo capaz de ejecutar modelos de 70B en cuantización Q5_K_M.
- Mejor relación calidad-precio: RTX 3090 usada (24 GB, 700 USD) — la mitad de velocidad que una 4090, pero también la mitad de precio.
- Mejor opción económica: RTX 3060 de 12 GB (280 USD) — ejecuta sin problemas modelos de la clase de 7B; punto de entrada ideal.
- Mejor alternativa no NVIDIA: Apple M4 Max 128 GB — un paradigma diferente, una memoria masiva, pero más lenta por token.
Cómo elegir realmente: la regla que supera cualquier ficha técnica
Elección para VRAM primero, rendimiento segundo, todo lo demás tercero.
La inferencia de modelos de lenguaje de gran tamaño (LLM) está dominada por el ancho de banda y la capacidad de memoria. Si tu modelo, su caché KV y el contexto caben íntegramente en la VRAM, obtienes inferencia a velocidad máxima. Si no caben, pagas una penalización de 5 a 10 veces mayor debido a la descarga hacia la CPU, y deja de importar la diferencia entre una GPU «rápida» y una «lenta»: ambas quedan limitadas por el ancho de banda PCIe y la memoria RAM del sistema.
Árbol de decisiones práctico:
- Modelos de 7–13 mil millones de parámetros (Llama 3 8B, Mistral 7B, Phi-4) → Mínimo de 12 GB de VRAM; 16 GB es cómodo. RTX 3060 de 12 GB o superior.
- Modelos de 30–34 mil millones de parámetros (Qwen 2.5 32B, Yi-34B) → 24 GB de VRAM en cuantización Q4. RTX 3090, 4090 o M4 Pro.
- Modelos de 70–72 mil millones de parámetros (Llama 3 70B, Qwen 2.5 72B) → Aproximadamente 24 GB de VRAM en Q3_K_S, 32 GB en Q4 (limpio), 48 GB en Q5 (óptimo). RTX 4090, RTX 5090, dos RTX 3090 o M4 Max.
- Modelos de 100 mil millones de parámetros o más (Mistral Large 2, Command R+ 104B) → Mínimo de 48 GB de VRAM. RTX 6000 Ada, dos RTX 4090 o M4 Max de 128 GB.
- Modelos de más de 200 mil millones de parámetros (DeepSeek V3, Llama 3 de 405 mil millones) → Memoria de 128 GB o más. M4 Ultra, servidores con múltiples GPU o servidores NVIDIA DIGITS.
Una vez identificada la categoría de modelo que te interesa, cualquier otra especificación distinta de la VRAM sirve únicamente como criterio de desempate.
Lista clasificada
1. RTX 4090 — la mejor opción general en 2026
La RTX 4090 no es la GPU para LLM más rápida en 2026 —esa es la 5090—, pero a precios de segunda mano representa la mejor relación calidad-precio con amplia ventaja. Sus 24 GB de VRAM superan holgadamente el umbral necesario para ejecutar modelos de 70B en cuantización Q4, su pila de software CUDA está completamente madura y todos los frameworks que importan (llama.cpp, vLLM, exllamav2, MLC-LLM, TensorRT-LLM) han tenido dos años para optimizarse específicamente para la arquitectura Ada.
Lo único que se sacrifica frente a la 5090 son 8 GB de VRAM y aproximadamente un tercio menos de rendimiento. Para la mayoría de flujos de trabajo locales con LLM, esto no justifica duplicar el precio.
Compra si: buscas una única GPU capaz de manejar modelos de 8B a 70B a velocidades útiles y tienes presupuesto para una compra usada de más de 1.200 USD.
Omite si: necesitas ejecutar diariamente modelos de 70B en cuantización Q5 o superior (te encontrarás con errores de memoria insuficiente, OOM) o tienes un límite estricto de 800 USD.
2. RTX 5090 — solo si realmente necesitas 32 GB
La RTX 5090 es la única GPU de consumo disponible en 2026 capaz de ejecutar Llama 3 70B en cuantización Q5_K_M sin compromisos. Este hecho único —combinado con su ancho de banda de memoria un 78 % superior al de la 4090— constituye la totalidad de su justificación.
Si no necesitas 32 GB de VRAM, estás pagando una prima de más de 1.000 USD por un rendimiento aproximadamente un 35 % mayor en cargas de trabajo que ya funcionaban perfectamente en la 4090. Si sí necesitas esos 32 GB (para ejecutar modelos de 70B en Q5 o Generación de vídeos con IA, para ajuste fino de modelos mayores de 13B), no hay competencia alguna a precios de consumo.
El análisis comparativo completo de rendimiento se encuentra en nuestro artículo Comparativa profunda: RTX 5090 frente a RTX 4090 para IA.
Compra si: necesitas 32 GB de VRAM y dispones de más de 2.000 USD.
Omite si: tus modelos caben en 24 GB o puedes encontrar una RTX 4090 usada por 1.200 USD.
3. RTX 3090 — la opción de valor inigualable
La RTX 3090 tiene ya cinco años, pero sigue siendo en 2026 la compra más rentable por gigabyte de VRAM. Veinticuatro gigabytes de memoria por 700 USD de segunda mano es lo que permite a miles de investigadores independientes de ML ejecutar modelos de clase 70B.
Su velocidad es aproximadamente el 60 % de la de una 4090, pero para inferencia aún ofrece una tasa de tokens por segundo útil en todos los modelos relevantes. Sus principales desventajas son un mayor consumo energético por unidad de trabajo y los riesgos inherentes a comprar una tarjeta de cinco años de antigüedad en el mercado secundario.
El clásico movimiento de entusiasta en 2026: dos RTX 3090 usadas con una fuente de alimentación de alta calidad de 1200 W y un puente NVLink, por un total de 1.400 USD, ofrecen 48 GB de VRAM que superan a una sola RTX 4090 en todos los modelos mayores de 30B. La configuración es engorrosa, pero funciona.
Compra si: tienes 700 USD para gastar, quieres iniciarte en los LLM locales y te sientes cómodo usando hardware de segunda mano.
Omite si: necesitas hardware nuevo con garantía o tu PC tiene restricciones estrictas de potencia o espacio.
4. RTX 3060 de 12 GB — la puerta de entrada
Cinco años después de su lanzamiento, la RTX 3060 de 12 GB sigue en producción y sigue siendo la respuesta correcta a la pregunta «¿cómo puedo empezar con LLM locales al menor costo posible?». Doce gigabytes son suficientes para cualquier modelo de 7–13B con cuantizaciones sólidas; Llama 3 8B alcanza 48 t/s (más rápido de lo que lees), y toda la tarjeta cuesta solo 280 USD nueva.
Lo que sacrifica: cualquier modelo de 30 mil millones de parámetros o más. La RTX 3060 no ejecutará Llama 3 70B a una velocidad utilizable, ni siquiera con cuantización. Es, sin duda, una GPU para «modelos pequeños».
Compra si: es nuevo en los modelos de lenguaje locales (LLM) y desea aprender antes de invertir más de 1000 USD.
Omite si: ya sabe que quiere ejecutar modelos de la clase de 70 mil millones de parámetros.
5. Radeon RX 7900 XTX: el compromiso de AMD
ROCm 6.3 junto con la RX 7900 XTX es, por fin, lo suficientemente buena en 2026 como para constituir una recomendación real, y no simplemente una opción de respaldo. Ofrece 24 GB de VRAM por unos 900 USD nuevos, un rendimiento aproximadamente intermedio entre una RTX 3090 y una RTX 4090, y soporte completo para PyTorch y llama.cpp.
No obstante, la fricción sigue siendo real. Algunos frameworks (como TensorRT-LLM, ciertos motores de inferencia exclusivos de CUDA o algunas implementaciones experimentales) simplemente no funcionan. El código experimental de vanguardia se orienta primero a CUDA; el soporte para AMD llega semanas o meses después.
Compra si: tiene objeciones ideológicas contra NVIDIA, es sensible al precio pero prefiere un producto nuevo con garantía, o ya posee un sistema basado mayoritariamente en hardware AMD.
Omite si: busca cero fricción o realiza investigación con lanzamientos muy recientes de nuevos modelos.
6. Apple M4 Max (Mac Studio / MacBook Pro): la apuesta por la memoria unificada
El M4 Max no es rápido por token comparado con las GPUs de NVIDIA. Lo que sí ofrece es memoria que no puede conseguirse en ningún otro lugar a precios de consumidor. Un M4 Max con 128 GB aloja cómodamente Llama 3 405B en cuantización Q4 —algo que ni siquiera una única RTX 5090 puede hacer.
Para flujos de trabajo centrados en la inferencia donde lo prioritario es el tamaño del modelo y no su velocidad (análisis de documentos largos, sistemas de agentes, investigación), el M4 Max es realmente la herramienta adecuada. Para entrenamiento, ajuste fino, generación de imágenes o cualquier flujo de trabajo que dependa de software exclusivo de CUDA, resulta una opción frustrante.
Compra si: necesita ejecutar modelos de 100 mil millones de parámetros o más localmente, vive dentro del ecosistema Mac o valora un funcionamiento silencioso.
Omite si: ajusta finamente modelos, genera imágenes o su LLM diario tiene menos de 70 mil millones de parámetros (estaría pagando por memoria que no necesita).
7. RTX 5070 Ti / RTX 5080 — la opción intermedia que no funciona
Ambas tarjetas son rápidas y modernas, pero 16 GB de VRAM en 2026 representan una cantidad incómoda para LLMs: demasiado para modelos de 7 mil millones de parámetros (sobredimensionado) y demasiado poco para modelos de 70 mil millones (no caben ni siquiera con cuantizaciones útiles). Son excelentes para juegos y tareas ligeras de IA, pero si la inferencia local de LLMs es su prioridad principal, obtendrá mejores resultados con una RTX 3090 usada (700 USD, 24 GB) o una RTX 4090 usada (1200 USD, 24 GB).
Compra si: es un jugador que también quiere experimentar con LLMs pequeños.
Omite si: la inferencia local de LLMs es su caso de uso principal.
Tabla comparativa
| GPU | VRAM | L3 8B Q4 t/s | L3 70B Q4 t/s | Precio de mercado | Veredicto |
|---|---|---|---|---|---|
| RTX 5090 | 32 GB | 168 | 22.1 | $2,400 | La mejor opción si necesita 32 GB |
| RTX 4090 | 24 GB | 122 | 16.4 | $1,300 | Mejor rendimiento general |
| RTX 3090 | 24 GB | 92 | 11.2 | $700 | Mejor relación calidad-precio |
| 2× RTX 3090 | 48 GB | 87 | 14.8 | $1,400 | Mejor configuración con 48 GB |
| RX 7900 XTX | 24 GB | 98 | 13.6 | $900 | Opción AMD (ROCm) |
| M4 Max de 128 GB | 128 GB | 78 | 9.4 | $4,999 | Para modelos de 100 mil millones de parámetros o más |
| M4 Max 64 GB | 64 GB | 78 | 9.4 | $3,499 | Opción silenciosa para Mac |
| RTX 5080 | 16 GB | 118 | n/d | $999 | Evitar para LLMs |
| RTX 5070 Ti | 16 GB | 104 | n/d | $749 | Evitar para LLMs |
| RTX 3060 12 GB | 12 GB | 48 | n/d | $280 | Mejor entrada |
| Arc B580 | 12 GB | 38 | n/d | $249 | Apuesta económica arriesgada |
Pila de software que realmente utilizará
Independientemente de la GPU que elija, en 2026 la pila de inferencia se ha consolidado en torno a tres opciones:
- Ollama — configuración más sencilla, menos ajustes avanzados. Ideal para quienes piensan: «Simplemente quiero conversar con Llama 3».
- LM Studio — Interfaz gráfica con navegador de modelos, que permite ajustar la descarga de capas, la división entre GPUs y el tamaño del contexto. Ideal para quienes quieren probar qué modelos funcionan en su hardware.
- llama.cpp + vLLM + exllamav2 — Línea de comandos, máximo rendimiento y control avanzado. Ideal para despliegues en producción y pruebas de rendimiento (benchmarking).
Los usuarios de CUDA tienen la ruta más sencilla: todo funciona. Los usuarios de ROCm deben apuntar a llama.cpp y Ollama (ambos totalmente compatibles). Los usuarios de Apple Silicon cuentan con MLX (el marco nativo de IA de Apple), que en 2026 ya es más rápido que la versión Metal de llama.cpp.
Para la VRAM que no tienes, la descarga a CPU te permite «tomar prestada» memoria RAM del sistema, aunque con una penalización severa de velocidad (hasta 10× más lento o peor). Útil para ejecutar un modelo que apenas cabe en tu hardware, pero incómodo como solución diaria.
Resumen rápido de ventajas e inconvenientes
Compras usadas de RTX 3090 / 4090
- Mejor relación VRAM/precio en 2026
- Soporte completo de CUDA y pila de software madura
- Buena reventa — las pérdidas están limitadas
- Construir sistemas multi-GPU es sencillo
Compromisos
- Sin garantía del fabricante
- Riesgo de tarjetas usadas en minería (en las RTX 3090)
- Mayor consumo eléctrico que las nuevas series 50
RTX 5090 + Apple M4 Max
- VRAM de gama alta (32 GB o 128 GB unificada)
- Controladores y soporte de última generación
- Sin riesgos del mercado de segunda mano
- Cargas de trabajo especializadas (RTX 5090: video con IA; M4 Max: modelos de 100 000 millones de parámetros o más)
Compromisos
- El doble de precio que una compra usada equivalente
- Mayor consumo eléctrico (RTX 5090) o menor velocidad por token (M4 Max)
- El M4 Max te ata al ecosistema Apple
Preguntas frecuentes
¿Cuál es la GPU más económica capaz de ejecutar Llama 3 70B localmente?
Una RTX 3090 usada (650–800 USD) es la opción más económica con una sola tarjeta. Llama 3 70B en cuantización Q3_K_S apenas cabe y alcanza unos ~9 tokens/segundo: funcional, pero justo. Para una experiencia cómoda con Q4_K_M, necesitas una RTX 4090 o una configuración con dos RTX 3090 que ofrezca al menos 32 GB de VRAM en total.
¿Es suficiente la RTX 4090 para trabajos serios con LLM en 2026?
Para la mayoría de los profesionales, sí. Sus 24 GB de VRAM permiten ejecutar modelos de 70B en cuantización Q4_K_M con contexto de 8K, modelos de clase 30B en Q5+ y ofrecen soporte completo de CUDA. Solo sentirás limitaciones en casos específicos: generación de video con IA, modelos superiores a los 100 000 millones de parámetros o ajuste fino (fine-tuning) de modelos mayores de 13 000 millones de parámetros.
¿Debería comprar dos RTX 3090 en lugar de una RTX 4090?
Matemáticamente, dos RTX 3090 ofrecen 48 GB de VRAM a un costo similar al de una RTX 4090: una gran ventaja para cargas de trabajo limitadas por memoria, como modelos de 70B o más. Los inconvenientes son: configuración más compleja (NVLink, fuente de alimentación, refrigeración del chasis), mayor consumo eléctrico (700 W combinados) y solo un ~15 % más de rendimiento frente a una única RTX 4090 al ejecutar modelos de 70B en Q4. Si necesitas específicamente 48 GB, adelante. De lo contrario, una sola RTX 4090 es más sencilla.
¿Puedo ejecutar LLM locales en una MacBook Pro?
Sí, y muy bien. El chip M4 Pro (48 GB) maneja con soltura modelos de 8B a 32B. El M4 Max (64–128 GB) ejecuta sin problemas modelos de 70B e incluso de 405B con cuantización intensa en la variante de 128 GB. Su velocidad es aproximadamente la mitad por token que una RTX 4090, pero su operación silenciosa y portabilidad son ventajas únicas.
¿Es ROCm finalmente utilizable para LLM en 2026?
Para inferencia, sí. llama.cpp, vLLM y Ollama ofrecen un soporte sólido para ROCm en la AMD Radeon RX 7900 XTX en 2026. Para entrenamiento, el soporte es parcial: PyTorch funciona en la mayoría de los casos, pero los artículos más recientes siguen publicando código exclusivo para CUDA que requiere adaptación. Si tu flujo de trabajo se centra en inferencia y ajuste fino ocasional con herramientas consolidadas, AMD es una opción realista.
¿Necesito NVLink para inferencia multi-GPU con LLM?
Para inferencia pura, no: PCIe es suficiente. NVLink resulta útil principalmente durante el entrenamiento y cuando se transmite un modelo entre GPUs durante una única pasada hacia adelante (forward pass). La mayoría de las configuraciones multi-GPU para inferencia simplemente dividen las capas entre tarjetas, y la penalización de PCIe es despreciable.
Conclusión
Para la mayoría de los entusiastas de LLM locales en 2026, la respuesta es una RTX 4090 usada por 1200–1400 USD. Sus 24 GB de VRAM, soporte completo de CUDA y controladores probados cubren el 90 % de los casos de uso sin complicaciones.
Si 1200 USD supera tu presupuesto, opta por una RTX 3090 usada por 700 USD — más lenta, pero con los mismos 24 GB de memoria y compatibilidad con los mismos flujos de trabajo.
Si necesitas específicamente ejecutar modelos de 70B con cuantizaciones de alta calidad, generar video con IA o entrenar modelos mayores de 13B, pasa a la RTX 5090RTX 5090.
Y si necesitas ejecutar modelos de 100B o más localmente, abandona por completo las GPUs de consumo de NVIDIA y considera la M4 Max de 128 GB o NVIDIA DIGITS. Su arquitectura de memoria unificada es el único camino asequible para consumidores que ofrece tanta memoria direccionable para modelos.
Todo lo demás — RTX 5080, RTX 5070 Ti, Intel Arc B580, cualquier GPU AMD salvo la 7900 XTX — representa un compromiso para quien no tiene como uso principal los LLM locales.

