NVIDIA GeForce RTX 5090
Acht GeForce RTX 5090-GPUs mit je 32 GB GDDR7, 256 GB pro Server, für Bild- und Video-Pipelines mit Diffusionsmodellen, Rendering und die Inferenz kleinerer Modelle, auf Anfrage konfiguriert.
- GPUs pro Server
- 8
- Speicher pro GPU
- 32 GB GDDR7
- Speicherbandbreite
- 1.792 GB/s
- KI-TOPS (FP4)
- 3.352 (mit Sparsity)
Technische Daten
| GPU | |
|---|---|
| Architektur | NVIDIA Blackwell (GB202) |
| Speicher | 32 GB GDDR7, 512 Bit, 28 Gbit/s |
| Speicherbandbreite | 1.792 GB/s |
| CUDA-Kerne | 21.760 |
| Tensor-Kerne | 680, fünfte Generation |
| RT-Kerne | 170, vierte Generation, 318 TFLOPS |
| FP4-Tensor (KI-TOPS) | 3.352 TFLOPS mit Sparsity, 1.676 TFLOPS ohne Sparsity |
| FP8-Tensor, FP16-Akkumulation | 1.676 TFLOPS mit Sparsity, 838 TFLOPS ohne Sparsity |
| FP32 | 104,8 TFLOPS |
| Boost-Takt | 2,41 GHz |
| Video-Engines | 3 NVENC (neunte Generation), 2 NVDEC (sechste Generation), AV1-Encoding und -Decoding |
| Interconnect | PCIe Gen 5; kein NVLink |
| Grafikkarten-Gesamtleistung | 575 W |
| Referenzkarte | 2 Slots, 304 mm x 137 mm (Founders Edition) |
| Server im Lieferzustand | |
|---|---|
| GPUs pro Server | 8 |
| GPU-Speicher pro Server | 256 GB (8 x 32 GB) |
| GPU-Leistungsaufnahme pro Server | 4.600 W laut NVIDIA-Angabe (8 x 575 W) |
| Kartenmodell | Wird in Ihrem Angebot bestätigt |
| CPU, Arbeitsspeicher, Storage und Netzwerk | Nach Ihren Anforderungen konfiguriert und in Ihrem Angebot bestätigt |
Typische Workloads
- Bild- und Videogenerierung mit Diffusionsmodellen, etwa ComfyUI-Pipelines
- Inferenz von Modellen, die in 32 GB pro GPU passen
- GPU-Rendering und Echtzeitgrafik
- Video-Encoding mit AV1
Mieten Sie dedizierte Server mit acht NVIDIA GeForce RTX 5090-GPUs für KI-Bild- und Videogenerierung, Rendering und die Inferenz kleinerer Modelle. RTX 5090-Server sind auf Anfrage erhältlich, nach Ihren Anforderungen konfiguriert, mit Verträgen über 36, 48 oder 60 Monate.
Für wen die RTX 5090 geeignet ist
Die RTX 5090 ist für Pipelines gedacht, die einen Job pro GPU ausführen und schnellen Speicher dringender brauchen als großen: Bild- und Videogenerierung mit Diffusionsmodellen, GPU-Rendering und die Inferenz von Modellen, die in 32 GB passen. Jede GPU hat 32 GB GDDR7, 256 GB pro Server, auf der Blackwell-Architektur mit FP4-Unterstützung in den Tensor-Kernen der fünften Generation.
Teams, die Frames parallel rendern oder generieren, erhalten acht unabhängige GPUs pro Server, jede mit dem vollen Speicher und der vollen Bandbreite der Karte, und kein anderer Mandant nutzt die Maschine.
Stärken
Herausragend ist die Speicherbandbreite. NVIDIA gibt für die RTX 5090 1.792 GB/s an einem 512-Bit-Bus mit 28 Gbit/s an, mehr pro GPU als die 1.597 GB/s der RTX PRO 6000 Blackwell Server Edition.
- Rechenleistung: 21.760 CUDA-Kerne und 104,8 TFLOPS FP32. Die von NVIDIA angegebenen 3.352 KI-TOPS gelten für FP4 mit Sparsity; ohne Sparsity erreicht FP4 1.676 TFLOPS.
- Tensor- und RT-Kerne: 680 Tensor-Kerne der fünften Generation und 170 RT-Kerne der vierten Generation mit einer Nennleistung von 318 TFLOPS für Raytracing.
- Video: drei NVENC-Engines der neunten Generation und zwei NVDEC-Engines der sechsten Generation pro GPU, mit AV1-Encoding und -Decoding.
- Leistungsaufnahme: laut NVIDIA-Angabe 575 W Grafikkarten-Gesamtleistung pro Karte, 4.600 W für acht GPUs.
Die RTX 5090 hat kein NVLink. Die GPUs kommunizieren über PCIe Gen 5. Das eignet sich besser für Arbeit, die unabhängig auf jeder GPU läuft, etwa ein Diffusionsjob pro Karte, als für Modelle, die auf mehrere GPUs verteilt sind.
Konfiguration im Lieferzustand
RTX 5090-Server werden nach Ihren Anforderungen konfiguriert und in Ihrem Angebot bestätigt, einschließlich Kartenmodell, CPU, Arbeitsspeicher, Storage und Netzwerk.
Jeder Server durchläuft vor der Übergabe ein Burn-in, und die Ergebnisse fließen in einen Abnahmebericht ein, wie unsere Seite Burn-in und Abnahme beschreibt.
So funktioniert die Miete
RTX 5090-Server sind auf Anfrage erhältlich. Nennen Sie uns, wie viele Server Sie brauchen, für wie lange und ab wann, und wir bestätigen den Lieferplan in einem schriftlichen Angebot. Sie mieten ganze 8-GPU-Server mit einem Vertrag über 36, 48 oder 60 Monate, und längere Laufzeiten bedeuten niedrigere Preise.
Das Unternehmen, das die Server nutzen wird, füllt vor der Unterzeichnung drei Onboarding-Formulare aus. Auf eine Anzahlung bei Unterzeichnung folgt für die gesamte Laufzeit ein fester Monatspreis, ohne Egress-Gebühren für die Medien, die Sie übertragen. Wir bieten keine Testphasen an; an ihre Stelle treten das Burn-in und der Abnahmebericht. Unsere Seite So mieten Sie erklärt jeden Schritt.
Workloads und Alternativen
Die RTX 5090 eignet sich für ComfyUI und ähnliche Diffusions-Pipelines, für Rendering und für Inferenz, bei der Gewichte und KV-Cache innerhalb von 32 GB pro GPU bleiben. Ein Modell mit 24B Parametern belegt in FP8 etwa 24 GB, sodass auf der Karte etwa 8 GB für den KV-Cache und den übrigen Speicherbedarf der Berechnung frei bleiben.
Unsere Seite KI-Videogenerierung behandelt Diffusions-Pipelines auf dedizierten Servern. Die tatsächlichen Kosten der RTX 5090 im großen Maßstab untersucht Datenbewegungen und Leerlaufzeiten, und ComfyUI und KI-Video auf dediziertem Bare Metal behandelt die Pipeline selbst.
Wenn 32 GB für Ihre Auflösung, Cliplänge oder Batchgröße zu klein sind, bietet die RTX PRO 6000 Blackwell 96 GB pro GPU mit ECC. Für Pipelines, die auf Ada Lovelace abgestimmt sind, sehen Sie sich die RTX 4090 an.
Was Kunden fragen
RTX 5090 oder RTX PRO 6000 Blackwell: Welche sollten wir mieten?
Die RTX PRO 6000 Blackwell hat dreimal so viel Speicher pro GPU (96 GB gegenüber 32 GB), ECC und ein passiv gekühltes Serverdesign, und in Montreal sind Kontingente verfügbar. Die RTX 5090 hat mehr Speicherbandbreite pro GPU, 1.792 GB/s gegenüber 1.597 GB/s, und eignet sich für Arbeit, die in 32 GB passt.
Was bedeuten 3.352 KI-TOPS?
Das ist der FP4-Tensor-Spitzenwert von NVIDIA für die RTX 5090 mit Sparsity, aus dem Whitepaper zur RTX Blackwell-Architektur. Ohne Sparsity beträgt der Wert 1.676 TFLOPS.
Sind die acht GPUs über NVLink verbunden?
Nein. Die GeForce RTX 5090 hat kein NVLink, daher kommunizieren die GPUs über PCIe Gen 5. Am besten eignen sich Pipelines, die auf jeder GPU einen unabhängigen Job ausführen.
Welche RTX 5090-Karten stecken in den Servern?
Das Kartenmodell wird in Ihrem Angebot bestätigt. Die Angaben von NVIDIA auf dieser Seite beziehen sich auf die Founders Edition oder das Referenzdesign, und NVIDIA weist darauf hin, dass Karten von Boardpartnern abweichen können.
Welche Vertragslaufzeiten gibt es?
36, 48 oder 60 Monate, mit niedrigeren Preisen für längere Laufzeiten. Sie leisten bei Unterzeichnung eine Anzahlung und zahlen danach für die gesamte Laufzeit einen festen Monatspreis, ohne Egress-Gebühren.
Mieten Sie RTX 5090-Server mit Laufzeiten von 36 bis 60 Monaten.
Nennen Sie uns die Hardware, die Anzahl der Server, die Laufzeit und das Startdatum. Sie erhalten ein schriftliches Angebot auf Grundlage unserer Lieferspezifikation.