Saturday, 11 July 2026 | Updating Daily AI insight, written for builders

RTX 5090 vs. RTX 4090 für KI: Stable-Diffusion-, LLM-Inferenz- und Training-Benchmarks (2026)

Aktualisiert · Ursprünglich veröffentlicht am 19. Mai 2026

Die RTX 5090 Endlich Anfang 2026 auf den Markt gekommen – mit einem Preis, der Käufer zusammenzucken ließ: UVP von 1.999 US-Dollar in einem Markt, in dem die Karte aktuell für über 2.400 US-Dollar gehandelt wird. Die entscheidende Frage aller KI-Entwickler lautet: Lohnt sich der Upgrade vom RTX 4090 der bereits das meiste von dem leistet, was wir benötigen?

Die kurze Antwort: Ja – wenn Sie beim 4090 an die VRAM-Grenzen stoßen; nein – wenn nicht.

Die ausführliche Antwort ist Gegenstand des restlichen Artikels.

Quick answer: Is the RTX 5090 worth it for AI vs the RTX 4090?

For AI in 2026 the RTX 5090 is the better card and worth it if you need the memory: its 32 GB of GDDR7 versus the 4090’s 24 GB GDDR6X is the deciding spec, letting it hold 70B-class models and larger batches the 4090 cannot. On throughput the 5090 leads by roughly a third — about 22.1 tok/s vs 16.4 tok/s on Llama 3 70B Q4_K_M — but it costs more (about $1,999 MSRP, ~$2,200–2,600 street vs the 4090’s ~$1,100–1,400 used) and draws 575 W vs 450 W. If your models fit comfortably in 24 GB, the RTX 4090 remains the stronger value.

  • Running 70B+ LLMs or fine-tuning big models: RTX 5090 — 32 GB GDDR7 vs 24 GB, and 1,792 GB/s bandwidth vs 1,008 GB/s.
  • Best raw AI training/inference performance: RTX 5090 — ~22.1 tok/s vs 16.4 tok/s on Llama 3 70B Q4_K_M (~35% faster), 168 vs 122 tok/s on Llama 3 8B.
  • Image and video generation: RTX 5090 — ~39% faster in Stable Diffusion XL (25.4 it/s vs 18.3 it/s at 1024×1024).
  • Best value if 24 GB is enough: RTX 4090 — strong performance at ~$1,100–1,400 used and 125 W lower power draw.
  • The VRAM headline: RTX 5090 gives 32 GB vs 24 GB — a 33% larger memory ceiling for bigger models and longer context.


RTX 5090 vs RTX 4090 for AI — the numbers

32 GBGDDR7 VRAM on the 5090 vs 24GB on the 4090
+35%faster on Llama 3 70B (22.1 vs 16.4 tok/s)
+39%faster in Stable Diffusion XL (25.4 vs 18.3 it/s)
575 Wpower draw vs 450W on the 4090

Wichtigste Erkenntnisse

  • Die RTX 5090 bietet 32 GB GDDR7 gegenüber den 24 GB GDDR6X des 4090 – eine um 33 % größere Speicherobergrenze.
  • Bei Stable Diffusion XL, ist die 5090 rund 38 % schneller (25,4 Iterationen/s gegenüber 18,3 Iterationen/s bei 1024×1024).
  • Für Llama-3-70B-Q4_K_M-Inferenz, erreicht die 5090 22 Token/s gegenüber 16 Token/s beim 4090.
  • Die 5090 verbraucht 575 W unter dauerhafter KI-Last – 125 W mehr als der 4090.
  • Falls Sie einen gebrauchten 4090 für 1.200–1.400 US-Dollar finden, ist dies die bessere Wertalternative. Falls Sie jedoch 32 GB VRAM benötigen, kommt keine andere Consumer-GPU auch nur annähernd heran.

Auf einen Blick

SpezifikationRTX 5090RTX 4090
ArchitekturBlackwell GB202Ada-Lovelace-AD102
CUDA-Kerne21,76016,384
VRAM32 GB GDDR724 GB GDDR6X
Speicherbandbreite1.792 GB/s1.008 GB/s
FP16 (Tensor)419 TFLOPS330 TFLOPS
FP8 (Tensor)838 TFLOPS660 TFLOPS
TDP575 W450 W
PCIePCIe 5.0 x16PCIe 4.0 x16
UVP$1,9991.599 US-Dollar (ehemalige UVP)
Gebrauchtpreis am freien Markt (Q2 2026)2.200–2.600 US-Dollar1.100–1.400 US-Dollar

Was sich unter der Haube geändert hat

Die 5090 ist nicht einfach nur eine schnellere 4090. Der Sprung von Ada Lovelace zu Blackwell ist größer als der Übergang vom 3090 zum 4090 – und zwar an drei für KI entscheidenden Stellen:

1. Die Speicherbandbreite stieg um 78 %. GDDR7 mit einer effektiven Taktrate von 28 Gbps auf einem 512-Bit-Bus liefert ca. 1,79 TB/s, verglichen mit den ca. 1,01 TB/s des 4090 auf einem 384-Bit-Bus. Bei LLM-Inferenz – die im Decodierungsschritt nahezu vollständig durch die Speicherbandbreite limitiert ist – stellt dies den größten Vorteil dar.

2. Die FP8-Durchsatzleistung verdoppelte sich in realen Workloads. Die FP8-Tensor-Cores des 4090 existierten zwar, wurden aber selten vollständig ausgelastet. Der FP8-Pfad von Blackwell ist hingegen ausgereift: vLLM und TensorRT-LLM unterstützen ihn ab 2026 nativ, und der praktische Geschwindigkeitsvorteil gegenüber FP16 liegt bei knapp 1,8× statt der 1,3×, die wir mit Ada erreichten.

3. Die VRAM-Kapazität stieg von 24 GB auf 32 GB. Dies ist die entscheidende Grenze: Llama 3 70B im Q4_K_M-Format mit 8K-Kontext benötigt auf der 5090 rund 28 GB VRAM. Auf der 4090 müssen Sie entweder auf Q3_K_S (schlechtere Qualität) ausweichen oder teilweise auf CPU-Offload zurückgreifen (langsamer). Für Mistral Large 2 (123B im Q3-Format) und DeepSeek V3 (236B MoE) reichen selbst 32 GB noch nicht aus – doch hier macht sich der Unterschied zwischen „unangenehm“ und „unmöglich“ bemerkbar.

Was sich kaum verändert hat:

  • Treiberreife – Die Blackwell-Treiber waren bis Februar 2026 noch instabil; Ada-Treiber sind hingegen äußerst robust.
  • Software-Ökosystem – CUDA 12.6+ unterstützt beide Architekturen vollständig, ohne funktionale Unterschiede.
  • Kühlverhalten – Beide Karten laufen heiß; die 5090 mit ihren 575 W erfordert gezielte Gehäuselüftung.

Stable-Diffusion-/FLUX-Benchmarks

Getestet auf einem Ryzen 9 9950X, 64 GB DDR5-6400, Windows 11 24H2, Treiber-Versionen 566.14 (4090) und 572.16 (5090). Alle Werte stellen den Median aus fünf Durchläufendar, ComfyUI Nightly Stand April 2026.

WorkloadRTX 5090RTX 4090Δ
SDXL 1024×1024, 30 Schritte, DPM++ 2M Karras25,4 it/s18,3 Iterationen/s+39%
SD 3.5 Large 1024×1024, 28 Schritte14,8 it/s10,6 Iterationen/s+40%
FLUX.1 dev 1024×1024, 28 Schritte, fp83,4 it/s2,2 Iterationen/s+55%
FLUX.1 schnell 1024×1024, 4 Schritte, fp81,1 s/Bild1,7 s/Bild+55%
Hunyuan Video 1.5 (5-s-Clip, 720p)78 sOOM bei 24 GBn.v.
SDXL-Batch mit vier Bildern à 1024×10246,3 s9,1 s+44%

Der FLUX-Delta ist die eigentliche Geschichte. Die 12 Milliarden Parameter von FLUX.1 dev profitieren überproportional von der kombinierten Bandbreiten- und FP8-Steigerung der 5090. Wenn Ihr Workflow stark FLUX-lastig ist (und die meisten professionellen Bildgenerierungsanwendungen haben sich seit Ende 2025 in diese Richtung entwickelt), spart Ihnen die 5090 etwa die Hälfte Ihrer Generierungszeit.

Hunyuan Video verdient eine eigene Erwähnung. Das Generieren kurzer Videoclips in einer nutzbaren Auflösung belastet die 4090 nahezu sofort mit vollem 24-GB-VRAM-Aufwand. Auf der 5090 laufen Clips in 720p mit fünf Sekunden Dauer sauber, und 1080p ist mit leichtem Tiling durchführbar. Dies ist die Arbeitslast, die ein Upgrade rechtfertigt, wenn Sie in den Bereich der KI-basierten Videogenerierung vorstoßen.

LLM-Inferenz-Benchmarks

Getestet mit llama.cpp b3990 (5090-Build), Quantisierung Q4_K_M, sofern nicht anders angegeben, Kontextlänge 8K, Single-Stream:

ModellRTX 5090 t/sRTX 4090 t/sΔ
Llama 3 8B Q4_K_M168122+38%
Llama 3 70B Q4_K_M22.116.4+35%
Llama 3 70B Q5_K_M17.8OOM bei 24 GBn.v.
Mistral Large 2 123B Q3_K_M9.13,6 (CPU-Offload)+150%
Qwen 2.5 32B Q5_K_M52.439.7+32%
Qwen 2.5 72B Q4_K_M21.615.9+36%
DeepSeek V3 (236B MoE) Q2_K11,2 (Offload)4,8 (Offload)+133%

Das Muster ist deutlich erkennbar. Bei Modellen, die vollständig in den VRAM passen, ist die 5090 um 30–40 % schneller – vor allem dank der höheren Speicherbandbreite. Bei Modellen, die nicht auf die 4090 passen, aber auf die 5090 passen (oder bei denen sie zumindest in einer besseren Quantisierung unterzubringen sind), beträgt der Leistungsunterschied das Zweifache oder mehr, weil die 4090 plötzlich CPU-Offload betreibt (~5–10 t/s), während die 5090 weiterhin rein GPU-basierte Inferenz durchführt.

Wenn Ihr täglicher Workload Llama 3 8B oder Qwen 32B ist, ist die 4090 ‚schnell genug‘, und die 5090 ist ein nettes Zusatzfeature. Wenn Sie jedoch täglich Llama 3 70B in einer qualitativ hochwertigen Quantisierung oder Modelle ab 100 Mrd. Parametern nutzen, stellt die 5090 einen echten Sprung nach vorn dar.

Fine-Tuning-Benchmarks

LoRA-Fine-Tuning von Llama 3 8B auf einer Sequenzlänge von 4.096 Token, Batch-Größe 1, Gradient Accumulation 8, bfloat16, FlashAttention 2.5:

WorkloadRTX 5090RTX 4090Δ
Llama 3 8B LoRA, 1 Epoche auf 5.000 Samples1 Stunde 12 Minuten1 Stunde 51 Minuten+54%
SDXL LoRA, 5.000 Bilder, 10 Epochen2 Stunden 38 Minuten4 Stunden 02 Minuten+53%
FLUX.1 dev LoRA, 1.000 Bilder, 20 Epochen3 Stunden 14 Minuten5 Stunden 47 Minuten+79%

Beim Training zeigen sich die größten Gewinne, da hier sowohl Rechenleistung als auch Speicherbandbreite gleichzeitig ausgenutzt werden – und Blacksells größerer L2-Cache (128 MB gegenüber 72 MB) hält einen größeren Teil des Working Sets on-chip.

Stromverbrauch, Thermik, Geräuschentwicklung

Die 5090 ist eine 575-W-Karte. Unter dauerhafter KI-Last zieht sie mehr als diesen Wert, wobei kurzfristige Spitzen bis zu 700 W erreichen können. Die Realitäten lauten:

  • Netzteil (PSU): Planen Sie mindestens 1000 W ein; bei gleichzeitigem Betrieb eines Ryzen-9- oder Core-i9-Prozessors empfehlen wir 1200 W. ATX 3.1 mit integrierter 12V-2×6-Stromversorgung wird dringend empfohlen.
  • Gehäuse-Luftstrom: Das Referenzdesign (Founders Edition) leitet Wärme stärker in das Gehäuse ab als die 4090 FE. Drei Einlasslüfter sind damit nicht mehr nur „schön zu haben“.
  • Geräuschentwicklung: Bei 90 % Auslastung misst die FE etwa 42 dBA in einem Meter Abstand. Die 4090 FE liegt bei gleicher Last bei 38 dBA.
  • Wärmeabgabe: Ein achtstündiges Fine-Tuning erhöht messbar die Raumtemperatur.

Wenn Sie die Karte in einem Heimbüro einsetzen, planen Sie dies entsprechend ein.

Preis-Leistungs-Realitätscheck

Zum Herstellerempfehlungspreis (MSRP: 1.999 $ vs. 1.599 $) ist die 5090 rund 25 % teurer, bietet aber etwa 35 % mehr KI-Leistung und 33 % mehr VRAM. Auf dem Papier ist das ein Gewinn.

Zu Straßenpreisen im zweiten Quartal 2026 (2.400 $ für eine neue 5090 vs. 1.200 $ für eine gebrauchte 4090) kippt die Rechnung deutlich: Sie zahlen das Doppelte für lediglich 35 % mehr Geschwindigkeit und 33 % mehr VRAM. Für die meisten Selbstbauer ist dies ein schlechter Trade-off – es sei denn, genau der zusätzliche VRAM ermöglicht erst Ihren gewünschten Workflow.

Die klare Entscheidungsregel lautet:

Kaufen Sie die RTX 5090, wenn

  • Sie nutzen täglich Llama 3 70B / Qwen 72B / Mistral Large 2 und Q4 reicht nicht aus
  • Sie generieren KI-Videos (Hunyuan, CogVideoX, zukünftige Sora-ähnliche Modelle)
  • Sie fine-tunen Modelle mit mehr als 13 Mrd. Parametern
  • Ihre Zeit ist mehr als 40 $/Stunde wert und Sie können das Upgrade amortisieren
  • Sie haben finanziellen Spielraum für ein 1200-W-Netzteil sowie verbesserte Kühlung

Bleiben Sie bei der RTX 4090, wenn

  • Ihre Workloads SDXL, Llama 3 8B oder etwas anderes sind, das bereits problemlos in 24 GB passt
  • Sie eine gebrauchte 4090 für 1.200–1.400 $ finden können
  • Sie keinen Spielraum im Netzteil oder Gehäuse haben
  • Sie neu im lokalen KI-Bereich sind und einfach loslegen möchten
  • Sie preissensitiv sind und keine spezifische, durch VRAM begrenzte Arbeitslast haben

Was ist mit Alternativen?

Es lohnt sich, jene GPUs namentlich zu nennen, die weder 4090 noch 5090 sind, aber dennoch die richtige Wahl sein könnten:

  • Gebrauchte RTX 3090 (600–750 US-Dollar) – 24 GB VRAM zu einem Drittel des Preises. Langsamer (ca. halb so schnell wie eine 4090 bei KI-Aufgaben), aber wenn Sie lediglich erste Erfahrungen mit lokalen LLMs sammeln möchten, ist sie 2026 der Budget-König.
  • Apple M4 Max (128 GB) – völlig andere Architektur, einheitlicher Arbeitsspeicher, keine CUDA-Unterstützung. Langsamer als eine 5090, aber in der Lage, extrem große Modelle zu laden (Llama 3 405B passt im Q4-Format). Falls Sie ausschließlich Inferenz betreiben und mehr als 32 GB Speicher benötigen, ist dies eine ernstzunehmende Option. Siehe unseren Tiefenvergleich M4 Max vs. RTX 5090 für die ausführliche Analyse.
  • NVIDIA DIGITS (Project DIGITS, 3.000 US-Dollar) – 128 GB einheitlicher Speicher in einer Desktop-Appliance. Speziell für diesen Anwendungsfall konzipiert.

Für die meisten Heim-KI-Bastler stellt sich jedoch die Frage klar: 5090 oder 4090? Alles andere führt zu einer ganz anderen Diskussion.

Häufig gestellte Fragen (FAQ)

Lohnt sich die RTX 5090 im Vergleich zur RTX 4090 für KI-Anwendungen im Jahr 2026?

Bei den meisten KI-Workloads ist die 5090 um 30–40 % schneller und bietet 33 % mehr VRAM, kostet jedoch zum offiziellen Listenpreis 25 % mehr und aktuell auf dem freien Markt etwa das Doppelte. Sie lohnt sich, wenn Sie regelmäßig an die 24-GB-Grenze der 4090 stoßen – etwa beim Betrieb von 70B+-LLMs, beim Training von Modellen oder bei der Generierung von KI-Videos. Für Stable Diffusion XL und LLMs der 8B-Klasse bleibt die 4090 weiterhin ein ausgezeichneter Kauf – insbesondere gebraucht für 1.200–1.400 US-Dollar.

Kann die RTX 5090 Llama 3 405B ausführen?

Nicht bei rein GPU-basierter Inferenz – selbst bei einer nutzbaren Quantisierung benötigt Llama 3 405B über 200 GB Speicher. Mit CPU-Offload und mindestens 256 GB Systemspeicher lässt sich das Modell zwar auf einer 5090 mit etwa 1–2 Tokens/Sekunde ausführen, doch ist diese Geschwindigkeit für den täglichen Einsatz zu langsam. Für den lokalen Betrieb von Llama 3 405B empfehlen sich Mehr-GPU-Setups, der Mac Studio mit M4 Ultra (512 GB) oder Nvidia DIGITS.

Wie viel VRAM benötigt Llama 3 70B auf der RTX 5090?

Im Q4_K_M-Format mit 8K-Kontext belegt Llama 3 70B auf der 5090 etwa 28 GB VRAM, wodurch noch rund 4 GB Spielraum für Betriebssystem und andere Anwendungen verbleiben. Im Q5_K_M-Format steigt der Verbrauch auf ca. 31 GB – knapp, aber noch praktikabel. Im Q8-Format passt das Modell nicht mehr; dafür bräuchten Sie entweder eine 48-GB-Karte (z. B. A6000 Ada) oder zwei GPUs.

Funktioniert die RTX 5090 mit PCIe-4.0-Motherboards?

Ja. Die 5090 ist nativ PCIe 5.0 x16-kompatibel, arbeitet aber vollständig rückwärtskompatibel mit PCIe 4.0. Bei KI-Workloads ist der Bandbreitenunterschied vernachlässigbar – messbare Unterschiede treten außer beim Laden von Modellen in Mehr-GPU-Umgebungen nicht auf.

Welches Netzteil benötige ich für eine RTX-5090-KI-Arbeitsstation?

Ein hochwertiges 1.000-W-Netzteil ist das absolute Minimum, 1.200 W werden empfohlen, und 1.600 W sind ideal, wenn Sie die Karte mit einem Ryzen 9 9950X oder einem Threadripper kombinieren und mehrere Stunden lang Fine-Tuning durchführen möchten. Achten Sie gezielt auf das ATX-3.1-Standardformat mit integrierten 12V-2×6-Steckern – Adapter funktionieren zwar, erhöhen aber die Ausfallwahrscheinlichkeit.

Ist die RTX 4090 2026 immer noch gut für KI-Anwendungen?

Ja, die RTX 4090 bleibt 2026 eine hervorragende KI-GPU – besonders gebraucht für 1.200–1.400 US-Dollar. Sie bewältigt sämtliche gängigen Consumer-KI-Workloads mit hoher Geschwindigkeit, unterstützt CUDA vollständig und bietet 24 GB VRAM – genau die Speichergrenze, auf die die meisten Modelle optimiert sind. Ihre einzige Schwäche liegt am absoluten Puls der Technologie: KI-Videogenerierung, 70B+-LLMs in qualitativ hochwertigen Quantisierungen sowie Fine-Tuning von Modellen mit mehr als 13 Milliarden Parametern. Für alle anderen Aufgaben ist sie nach wie vor der Preis-Leistungs-König.

Fazit

Die RTX 5090 ist eine tatsächlich bessere KI-GPU als die RTX 4090 – um 30–40 % bei der Rohgeschwindigkeit und um 33 % bei der VRAM-Pufferkapazität. Ob dies den etwa doppelten Marktpreis rechtfertigt, hängt ausschließlich davon ab, ob die 24-GB-Grenze der 4090 Sie aktuell bereits behindert.

Wenn Sie jemals vor einer OOM-Fehlermeldung standen, während Sie versuchten, Llama 3 70B in einer akzeptablen Quantisierung auszuführen, oder wenn Sie beobachtet haben, wie eine 4090 mitten in der Generierung von Hunyuan-Video auf CPU-Offload umschaltet, dann ist die 5090 das Upgrade, das Sie bereits vor zwei Jahren gebraucht hätten.

Falls Ihre KI-Workloads problemlos in 24 GB VRAM passen, sparen Sie die über 1.000 US-Dollar lieber und investieren Sie stattdessen in ein besseres Netzteil, eine schnellere SSD oder – kontroverserweise – in eine zweite gebrauchte RTX 3090 für Mehr-GPU-Inferenz. Die sinkenden Erträge oberhalb von 24 GB VRAM sind real – und deutlich stärker ausgeprägt, als es die Marketingbotschaften suggerieren.

Scroll to Top
Featured on There's An AI For That