Ein Großteil der KI-Hardware-Inhalte geht von einem Budget von tausend US-Dollar aus. Dieser Artikel tut das nicht. Wenn Sie 500 US-Dollar oder weniger zur Verfügung haben und echte KI-Arbeiten lokal durchführen möchten – also kleine LLMs betreiben, Stable-Diffusion-Bilder generieren oder das Ökosystem kennenlernen wollen – dann finden Sie hier die ehrlichen Optionen für 2026 sowie Empfehlungen zur Kaufentscheidung.
Die Kurzfassung lautet: Keine dieser GPUs kann Llama 3 70B ausführen. Alle unterstützen problemlos Llama 3 8B und SDXL. Die Wahl hängt vor allem davon ab, wie viel VRAM Sie mit Ihrem Budget erhalten können.
Wichtigste Erkenntnisse
- Beste Gesamtlösung im Budgetsegment: RTX 3060 12 GB (280 US-Dollar) – auch 2026 noch die Königsgpu für kostengünstige KI-Anwendungen.
- Beste Neuware mit Garantie: RTX 4060 16 GB (430 US-Dollar) – mehr VRAM und höhere Geschwindigkeit.
- Beste Außenseiterwahl: Intel Arc B580 (249 US-Dollar) – höchste Token-Leistung pro Dollar, aber noch unvollkommene Softwareunterstützung.
- Gebrauchtoption: RTX 3090 (650 US-Dollar, knapp über dem Budget) – bietet 24 GB VRAM. Ein Überschreiten des Budgets lohnt sich hier.
- Keine dieser GPUs kann Modelle der 70B-Klasse mit nutzbaren Geschwindigkeiten ausführen. Bitte beachten Sie dies beim Kauf.
- Die Kurzliste
- 1. RTX 3060 mit 12 GB – der nach wie vor ungeschlagene preisgünstige AI-König
- 2. RTX 4060 Ti mit 16 GB – der Mittelweg
- 3. Intel Arc B580 – die Außenseiterkarte
- 4. Gebrauchte RTX 3090 – überschreiten Sie Ihr Budget, wenn möglich
- Schneller Überblick über Vor- und Nachteile
- Welche Grafikkarten wir NICHT ausgewählt haben
- Welche Grafikkarte passt zu Ihren tatsächlichen Anwendungen?
- Häufig gestellte Fragen (FAQ)
- Fazit
- Verwandte Artikel
Die Kurzliste
| GPU | VRAM | Preis (Neuware) | Llama 3 8B Q4 | SDXL 1024×1024 |
|---|---|---|---|---|
| RTX 3060 12 GB | 12 GB | $280 | 48 Token/s | 4,1 it/s |
| RTX 4060 8 GB | 8 GB | $300 | 62 t/s | 5,2 it/s |
| RTX 4060 Ti 16 GB | 16 GB | $430 | 74 t/s | 7,1 it/s |
| Intel Arc B580 | 12 GB | $249 | 38 t/s (ROCm) | 3,4 it/s |
| RX 7600 XT | 16 GB | $330 | 52 t/s (ROCm) | 4,5 it/s |
| Gebrauchte RTX 3090 ⚠ | 24 GB | 650 $ (mehr als geplant) | 92 Token/s | 14,8 it/s |
1. RTX 3060 mit 12 GB – der nach wie vor ungeschlagene preisgünstige AI-König
Fünf Jahre nach dem Launch ist die RTX 3060 mit 12 GB immer noch in Produktion und nach wie vor die richtige Antwort auf die Frage „Gib mir eine günstige lokale KI-Leistung“. Zwölf Gigabyte reichen aus, um beliebige Modelle der 7–8B-Klasse in qualitativ hochwertigen Quantisierungen zu betreiben, und die CUDA-Unterstützung ist so ausgereift wie kaum eine andere. Der Stromverbrauch ist moderat (170 W), die Karte passt in jeden PC, und man findet sie bei jedem Händler.
Was sie nicht kann: Modelle größer als 13B verarbeiten. SDXL fühlt sich im Vergleich zur 4060 Ti langsam an. FLUX.1 dev funktioniert zwar, benötigt aber sechs Sekunden pro Bild.
Kaufen Sie sie, wenn: Sie möchten den kostengünstigsten Einstieg in die lokale KI mit null Software-Hürden.
2. RTX 4060 Ti mit 16 GB – der Mittelweg
Für rund 150 $ mehr als die 3060 erhalten Sie 4 GB mehr VRAM (16 gegenüber 12) und eine um 50 % höhere Inferenzgeschwindigkeit. Die 16 GB ermöglichen den Betrieb von Llama 3 13B / Phi-4 / Qwen 2.5 14B in soliden Quantisierungen – ein deutlicher Leistungssprung.
Der Haken: Die 4060 Ti verfügt über einen berüchtigt schmalen 128-Bit-Speicherbus, der bestimmte Workloads ausbremst. Für KI-Anwendungen spielt dies jedoch weniger eine Rolle als beim Gaming.
Kaufen Sie sie, wenn: Sie möchten eine preisgünstige Grafikkarte, die 13B-Modelle komfortabel und SDXL zügig ausführt.
3. Intel Arc B580 – die Außenseiterkarte
Zum Preis von 249 $ bietet die Arc B580 2026 das beste Verhältnis von Dollar pro VRAM-Byte. Mit Intels IPEX-LLM und OpenVINO erreicht sie bei Llama 3 8B etwa 38 t/s – langsamer als eine 3060, aber durchaus brauchbar.
Die ehrliche Einschränkung: Das Software-Ökosystem ist lückenhaft. llama.cpp mit Vulkan/SYCL funktioniert. ComfyUI läuft mit einigen Plugins. PyTorch mit Intels Erweiterung unterstützt viele, aber nicht alle Modelle. Neuere Forschungscodebasen zielen selten am ersten Tag auf Arc ab.
Kaufen Sie sie, wenn: Sie sind bereit, Softwareprobleme selbst zu debuggen, um die günstigste 12-GB-Lösung zu nutzen, oder Sie suchen zusätzlich eine leistungsfähige Gaming-Grafikkarte.
4. Gebrauchte RTX 3090 – überschreiten Sie Ihr Budget, wenn möglich
Dies ist die Option für den Fall, dass Sie Ihr Budget bis auf 650 $ erweitern können. Die 3090 verfügt über 24 GB mit VRAM-Kapazität zu einem Preis, der nur knapp über dem einer RTX 4060 Ti liegt – was eine völlig andere Leistungsklasse bedeutet: Sie ermöglicht den Betrieb von Llama 3 70B im Q3-Format (rauh, aber möglich) sowie von Qwen 32B im Q5-Format mit komfortabler Leistung und KI-basierte Videogenerierung bei niedrigen Auflösungen.
Die Nachteile: Sie ist fünf Jahre alt, benötigt ein stärkeres Netzteil (750 W oder mehr), läuft heiß und wird gebraucht gekauft.
Kaufen Sie sie, wenn: Sie können 650 $ zusammenkratzen, verfügen über ein leistungsstarkes Netzteil und möchten tatsächlich interessante Modelle lokal ausführen.
Für eine ausführliche Analyse siehe unseren Leitfaden zu den besten GPUs für lokale LLMs.
Schneller Überblick über Vor- und Nachteile
Die Realität unter 500 $
- Sie können echte KI-Arbeit preisgünstig erledigen
- LLMs der 8B-Klasse laufen mit Geschwindigkeiten, die „schneller als Sie lesen“ sind
- SDXL-Bildgenerierung ist produktiv einsetzbar
- Ausgezeichneter Einstieg, um Grundlagen zu erlernen, bevor Sie größere Investitionen tätigen
Was Sie dabei opfern
- Keine lokalen 70B-Modelle
- Keine KI-Videogenerierung (oder nur äußerst eingeschränkt)
- Fine-Tuning ist langsam
- Wenn Sie intensiv damit arbeiten, werden Sie sie innerhalb von 12–18 Monaten ausgewachsen haben
Welche Grafikkarten wir NICHT ausgewählt haben
- RX 6700 XT mit 12 GB (330 $) — ROCm-Unterstützung für RDNA 2 ist nach wie vor unzuverlässig; die 7600 XT ist die bessere AMD-Wahl.
- RTX 4060 8 GB — 8 GB sind 2026 für KI-Anwendungen zu wenig. Selbst wenn der Preis verlockend erscheint, sollten Sie diese Karte für maschinelles Lernen meiden.
- RTX 3050 mit 8 GB — gleiche Problematik, noch langsamer.
- GTX 1660 Super — fehlt Tensor-Cores und ist für KI-Anwendungen dramatisch langsamer. Nicht empfehlenswert.
Welche Grafikkarte passt zu Ihren tatsächlichen Anwendungen?
Die vorgeschlagenen Modelle liegen auf dem Papier so nahe beieinander, dass die richtige Wahl von einer einzigen Frage abhängt: Welches Modell wollen Sie tatsächlich in den Videospeicher laden? Preisgünstige KI-Anwendungen sind fast ausschließlich speicherlimitiert – beginnen Sie daher mit dem Modell, nicht mit Benchmarks. Hier sehen Sie, wie die Kurzliste realen Workloads zugeordnet wird.
- Lokale LLMs der Klasse 7B–13B (Chat, Programmierassistenten, RAG): Ein 4-Bit-(Q4-)7B-Modell benötigt nur etwa 5–6 GB VRAM; ein 13B-Modell liegt bei ca. 8–10 GB, wenn man zusätzlich Speicherplatz für den Kontext berücksichtigt. Jede Grafikkarte mit 12 GB VRAM bewältigt diese Anforderung mühelos – genau deshalb bleibt die RTX 3060 12 GB die Referenzgröße für beste Preis-Leistung. Ihre 192-Bit-Schnittstelle und ihre Bandbreite von rund 360 GB/s sind hier wichtiger als reine Tensor-Geschwindigkeit, da die Token-Generierung durch die Geschwindigkeit begrenzt wird, mit der Gewichte durch den Speicher fließen.
- Stable Diffusion und SDXL: SDXL läuft im FP16-Format innerhalb von etwa 8 GB VRAM, sodass alle hier genannten Grafikkarten damit zurechtkommen. Der entscheidende Unterschied liegt in der maximalen Batch-Größe und der Auflösungsreserve – hier liegt die RTX 4060 Ti 16 GB vorn: Sie ermöglicht größere Batches in ComfyUI, ohne dass Daten in den Systemspeicher ausgelagert werden müssen.
- FLUX und anspruchsvollere Bildmodelle: FLUX in voller Präzision benötigt weit mehr VRAM, als jede Grafikkarte unter 500 US-Dollar bietet. Daher werden Sie quantisierte GGUF- oder FP8-Versionen verwenden (ein Q4-FLUX passt in etwa 7 GB). Der zusätzliche Videospeicher der 16-GB-Karten ermöglicht qualitativ hochwertigere Quantisierungen und reduziert Out-of-Memory-Fehler.
- Größere Modelle und die Frage nach 24 GB VRAM: Der Schritt von 13B- zu 30B-Modellen oder leichtem Feintuning erfordert wirklich etwa 20–24 GB VRAM, und die gebrauchte RTX 3090 ist die klassische Möglichkeit, kostengünstig 24 GB zu erhalten. Seien Sie jedoch ehrlich beim Preis: Im Jahr 2026 liegt der typische Preis für eine gebrauchte RTX 3090 bei rund 600–800 US-Dollar; Angebote unter 500 US-Dollar sind eher selten als üblich. Falls Sie ein solches Angebot finden, ist dies der einzige realistische Weg zu 24 GB VRAM; andernfalls liegt die praktische Obergrenze unter 500 US-Dollar bei einer 16-GB-Karte – und 30B-Modelle bleiben ohne Offloading in den Systemspeicher außer Reichweite.
- CUDA-Tutorials ohne Hindernisse nachvollziehen: Falls Sie Code direkt von GitHub-Repos oder YouTube-Videos übernehmen möchten, bleiben Sie bei NVIDIA. Die Intel Arc B580 (12 GB, ca. 249 US-Dollar) ist für Inferenz durchaus leistungsfähig, nutzt jedoch IPEX, Vulkan oder OpenVINO statt CUDA, erreicht nur etwa 70–75 % der Durchsatzleistung einer vergleichbaren NVIDIA-Grafikkarte und funktioniert nicht mit benutzerdefinierten CUDA-Kernels. Wählen Sie sie nur, wenn Sie bereit sind, den Code anzupassen.
Der ehrliche Shortcut: Entscheiden Sie sich für die RTX 3060 12 GB wenn Sie vorrangig LLMs betreiben und möglichst wenig ausgeben möchten; für die RTX 4060 Ti 16 GB wenn Bildgenerierung Ihre Priorität ist und Sie Effizienz schätzen; und suchen Sie nur dann nach einer gebrauchten RTX 3090 wenn Sie sie nahe Ihrem Budget finden und tatsächlich 24 GB Kapazität benötigen. Greifen Sie zur Arc B580, sobald der Preis pro Gigabyte die Bequemlichkeit des NVIDIA-Ökosystems übertrifft.
Häufig gestellte Fragen (FAQ)
Kann ich Stable Diffusion ernsthaft auf einer Grafikkarte mit einem Budget von 300 US-Dollar betreiben?
Ja. Die RTX 3060 mit 12 GB VRAM für 280 US-Dollar erreicht bei SDXL rund 4 Iterationen pro Sekunde – völlig ausreichend für produktive private Nutzung. FLUX.1 läuft zuverlässig im Low-VRAM-Modus. Sie werden keine Videogenerierung mit 100 Bildern pro Batch durchführen können, doch für Einzelbilder und kleine Batches ist die Karte durchaus geeignet.
Wird die RTX 5050 bzw. 5060 2026 eine bessere Einstiegsgrafikkarte sein?
Die RTX 5060 (gerüchteweise mit 8 GB VRAM für 300 US-Dollar) verfügt über zu wenig Videospeicher, um sie für KI-Anwendungen zu empfehlen. Selbst bei Markteinführung bleiben die RTX 4060 Ti mit 16 GB oder die RTX 3060 mit 12 GB bei vergleichbaren Preisen die besseren Wahlmöglichkeiten für KI. Warten Sie stattdessen auf 50er-Serie-Karten mit mindestens 16 GB VRAM, die nicht im Flagship-Preissegment angesiedelt sind.
Sollte ich gebraucht oder neu unter 500 US-Dollar kaufen?
Eine gebrauchte RTX 3090 (für 650 US-Dollar) schlägt jede neue Grafikkarte unter 500 US-Dollar bei KI-Anwendungen deutlich. Falls Sie Ihr Budget etwas dehnen und das Risiko gebrauchter Hardware akzeptieren können, ist dies die klügere Entscheidung. Innerhalb eines strikten Budgets von 500 US-Dollar sind die neue RTX 3060 mit 12 GB oder die RTX 4060 Ti mit 16 GB die sichereren Optionen.
Kann eine preisgünstige Grafikkarte in Kombination mit CPU-Offloading größere Modelle ausführen?
Technisch ja – sowohl Ollama als auch llama.cpp unterstützen das Aufteilen von Modellschichten zwischen GPU und Arbeitsspeicher. Die Performance ist jedoch äußerst gering (3–8 Tokens pro Sekunde bei 70B-Modellen), wodurch der Einsatz als täglicher Arbeitsrechner unpraktisch wird. Nützlich für gelegentliche Experimente, aber nicht für den regulären Einsatz.
Welches Netzteil benötige ich für eine dieser Grafikkarten?
Ein 550-W-Gold-zertifiziertes Netzteil reicht für alle hier genannten Grafikkarten aus – mit Ausnahme der gebrauchten RTX 3090, für die ein 750-W-Netzteil empfohlen wird. Falls Sie bereits ein 500-W-Netzteil besitzen, passt die RTX 3060 mit 12 GB problemlos hinein; die RTX 4060 Ti ist ebenfalls kompatibel; die RTX 3090 würde jedoch die Überstromschutzfunktion auslösen.
Wie wähle ich eine preisgünstige Grafikkarte passend zur Größe des gewünschten Modells aus?
Nutzen Sie als Faustregel bei 4-Bit-(Q4-)Quantisierung: Ein 7B-Modell benötigt etwa 5–6 GB VRAM, ein 13B-Modell ca. 8–10 GB und ein 30B-Modell etwa 20–24 GB – stets unter Berücksichtigung einiger zusätzlicher Gigabyte für den Kontext. Das bedeutet: Eine 12-GB-Karte bewältigt 7B–13B-Modelle mühelos, eine 16-GB-Karte bietet zusätzlichen Spielraum und größere Bildbatches, während der Zugriff auf 30B-Modelle eine 24-GB-Karte wie eine gebrauchte RTX 3090 erfordert (die im Jahr 2026 meist über 500 US-Dollar kostet). Entscheiden Sie zunächst, welches Modell Sie realistischerweise nutzen möchten, und kaufen Sie dann die kleinste Grafikkarte, die dieses Modell mit ausreichend Reserve bewältigt.
Muss ich unbedingt NVIDIA wählen, oder sind Intel und AMD im Budgetbereich ebenfalls sinnvolle Alternativen?
Sie sind nicht zwingend auf NVIDIA angewiesen, doch NVIDIA bleibt der Weg mit dem geringsten Aufwand, da nahezu jedes Tutorial, jede Quantisierungsbibliothek und jeder benutzerdefinierte Kernel CUDA voraussetzt. Intels Arc B580 funktioniert gut für Inferenz über IPEX, Vulkan oder OpenVINO und bietet hervorragenden Wert pro Gigabyte, doch müssen Sie mit angepasstem Code rechnen und akzeptieren, dass die Durchsatzleistung rund 25–30 % unter der einer vergleichbaren NVIDIA-Grafikkarte liegt. AMDs ROCm hat sich verbessert, bleibt aber bei Consumer-Grafikkarten weiterhin hinterher. Wenn Ihre Zeit mehr wert ist als die Einsparung, bleiben Sie bei NVIDIA; wenn Sie Freude am Experimentieren haben, sind die Alternativen durchaus realistische Optionen.
Wie prüfe ich, ob eine gebrauchte preisgünstige Grafikkarte tatsächlich funktioniert, bevor ich bezahle?
Drei Tests decken fast alle defekten Karten auf. Erstens: Bestätigen Sie das exakte Modell und die VRAM-Kapazität mit Software wie GPU-Z – vertrauen Sie niemals dem Aufkleber, da eine RTX 3060 mit 8 GB oft fälschlich als 12-GB-Version ausgegeben wird. Zweitens: Führen Sie einen dedizierten VRAM-Test wie OCCT oder einen GPU-Speichertester mindestens zehn Minuten lang durch; fehlerhafter Speicher zeigt sich durch farbige Punkte, Linien oder Artefakte und ist nicht reparabel. Drittens: Führen Sie einen Stress-Test wie FurMark 15 Minuten lang durch und achten Sie darauf, dass die Temperaturen unter etwa 85 °C bleiben. Falls der Verkäufer keinen Live-Test zulässt, verzichten Sie besser auf den Kauf.
Fazit
Die ehrliche Antwort auf die Frage nach der „besten preisgünstigen Grafikkarte für KI unter 500 US-Dollar“ im Jahr 2026 lautet: Kaufen Sie die RTX 3060 mit 12 GB VRAM für 280 US-Dollar – es sei denn, Sie haben einen konkreten Grund, dies nicht zu tun. Fünf Jahre alt, ausgereifte CUDA-Unterstützung, 12 GB VRAM und immer noch in Produktion: Damit ist sie die klügste Budgetwahl für alle, die lokale KI-Anwendungen erlernen möchten, ohne zu viel auszugeben.
Falls Sie Ihr Budget auf 430 US-Dollar erhöhen können, stellt die RTX 4060 Ti mit 16 GB einen spürbaren Leistungszuwachs dar. Und falls Sie sich eine gebrauchte RTX 3090 für 650 US-Dollar leisten können, ist dies tatsächlich der optimale Kompromiss für budgetbewusste KI-Enthusiasten im Jahr 2026.
Was Sie mit keiner der Grafikkarten unter 500 US-Dollar bewerkstelligen können, ist der lokale Betrieb moderner, hochwertiger Open-Weight-Modelle mit brauchbarer Geschwindigkeit. Das ist die entscheidende Grenze. Überschreiten Sie sie erst, wenn Ihr Budget dies zulässt.

