Nvidia kündigt DLSS 3.5 mit Ray Reconstruction an, um die RT-Qualität mithilfe eines KI-trainierten Denoisers zu verbessern.

Nvidia kündigt DLSS 3.5 mit Ray Reconstruction an, um RT-Qualität zu verbessern.

Die Gamescom 2023 hat begonnen – wie ihr vielleicht bemerkt habt – und Nvidia hat DLSS 3.5 vorgestellt, eine neue Version von DLSS, die “Ray Reconstruction” hinzufügt – im Grunde genommen eine KI-gesteuerte Rauschunterdrückung, die die Qualität von Raytracing-Effekten auf RTX-Grafikkarten verbessert. Das Unternehmen hat außerdem eine neue Community-Remaster-Version des legendären Half-Life 2, neue DLSS 3- und Reflex-Titel und mehr angekündigt.

Lassen Sie uns zuerst über die DLSS 3.5-Neuigkeiten sprechen, denn das ist faszinierend. Die wichtige Information hier ist, dass Echtzeit-Raytracing auf einer relativ geringen Anzahl von Strahlen beruht, die geworfen werden – sicherlich weit weniger als ein Strahl pro Pixel – also haben wir kein vollständiges Bild der “Ground Truth”, sondern ein Bild mit sowohl Spielinformationen als auch Rauschen. Das bedeutet, dass ein Schritt zur Rauschunterdrückung erforderlich ist, um die fehlenden Pixel zu füllen, der Techniken wie temporale Akkumulation und räumliche Interpolation verwendet, um ein qualitativ hochwertiges Endergebnis zu erzeugen.

Bisher ist alles normal. Normalerweise werden diese Rauschunterdrücker manuell abgestimmt, aber die Innovation besteht darin, dass Nvidia ein KI-Netzwerk trainiert hat (mit fünfmal so vielen Daten wie für das Training von DLSS 3 verwendet), das bessere Ergebnisse erzielen kann. Es kann verschiedene Methoden mit verschiedenen raytracing-Effekten verwenden, gute Pixel erkennen und schlechte Pixel verwerfen und dabei die hochfrequenten Details beibehalten, die normalerweise beim Hochskalieren verwischt würden.

Hier ist das offizielle Nvidia-Video, das die neue DLSS 3.5-Suite und die Ray Reconstruction in Cyberpunk 2077 demonstriert.

Nvidia sagt, dass der Einsatz eines einzigen KI-trainierten Modells anstelle mehrerer Rauschunterdrückungsschritte auch zu einem leichten Leistungsvorteil führen kann. Sie haben ein Beispiel gezeigt (im obigen Video), bei dem sich die Framerate von Cyberpunk 2077 von etwa 104 auf etwa 112fps erhöht hat, wenn die Ray Reconstruction aktiviert ist. Insgesamt sollten wir jedoch eine Leistung erwarten, die “ungefähr gleich” ist, wenn die Funktion aktiviert ist.

Bemerkenswerterweise erfordert dieser neue Rauschunterdrücker zusätzliche Informationen aus dem Spiel, um zu funktionieren, sodass er von den Entwicklern für jeden Titel einzeln hinzugefügt werden muss und kein universelles Upgrade für alle vorhandenen RT-Titel ist.

Die Ray Reconstruction läuft jedoch auf den Tensor-Kernen von Nvidia-Grafikkarten, sodass diese Funktion auf RTX-20- und 30-Serien-Grafikkarten sowie auf den neuesten 40-Serien-GPUs von Nvidia verfügbar sein wird.



Die Ray Reconstruction wird zuerst bei Path-Tracing-Spielen hinzugefügt, da diese am meisten davon profitieren, da sie ausschließlich RT-Effekte verwenden. Diese kurze Liste umfasst die Phantom Liberty-Erweiterung von Cyberpunk 2077, Portal mit RTX und Alan Wake 2 – von dem wir bisher nicht wussten, dass es ein path-traced Titel ist. Natürlich hat Remedy mit dem Spiel Control aus dem Jahr 2019 bereits beeindruckende Arbeit geleistet und gilt als eine der besten RT-Demonstrationen, daher macht es Sinn, dass sie Path Tracing jetzt nutzen. (Ein Alan Wake 2 DLSS 3.5-Trailer wird heute um 14:00 Uhr britischer Zeit veröffentlicht, in dem weitere Aufnahmen des Spiels und seiner grafischen Technologien gezeigt werden.)

Die ersten DLSS 3.5-Titel sollen “diesen Herbst” erscheinen. Darüber hinaus integrieren auch drei Content-Creation-Tools – Chaos Vantage, D5 Render und Nvidia Omniverse – die Ray Reconstruction, um Vorschaubilder zu verbessern.

Für weitere Details darüber, wie Ray Reconstruction (und Ray Tracing im Allgemeinen) funktioniert, lohnt es sich, den Nvidia-Blogartikel zu DLSS 3.5 zu lesen.

In ihrer Präsentation kündigte Nvidia auch Half-Life 2 RTX an, ein Community-Projekt, bei dem RTX Remix verwendet wird, um das wegweisende Half-Life 2 mit einer Vielzahl von Technologien einschließlich vollständigem Ray Tracing, DLSS 3, Reflex und RTX IO sowie modernen Assets neu zu gestalten.

Das Spiel sieht bereits fantastisch aus, dank der Arbeit mehrerer Half-Life-Modding-Teams, die zu einer neuen Gruppe namens Orbifold Studios zusammengeführt wurden, aber Nvidia hofft sicherlich, dass die Ankündigung des Projekts dazu führt, dass sich weitere Freiwillige beteiligen. Wenn Sie interessiert sind, können Sie zur Half-Life 2 RTX-Website von Nvidia gehen.

An anderer Stelle wurde die DLSS 3-Bildgenerierung für Call of Duty: Modern Warfare 3, Payday 3 und Fortnite angekündigt, während MW3 und Payday 3 auch Reflex zur Reduzierung von Latenzzeiten bieten sollen. Nvidias Metriken zeigen, dass 90 Prozent der GeForce Experience-Benutzer Reflex einschalten, wenn es angeboten wird – obwohl es oft standardmäßig aktiviert ist. Dadurch wird es zu einer deutlich beliebteren Funktion als Ray Tracing oder sogar DLSS, die je nach gewählten Einstellungen offensichtliche Nachteile in Bezug auf Leistung oder Bildqualität haben.

Hier ist ein Vorschauvideo für das laufende Half Life 2 RTX-Projekt.

Nvidia gab außerdem bekannt, dass Xbox PC Game Pass-Titel ab diesem Donnerstag (dem 24. August) auf GeForce Now verfügbar sein werden. Es wurden auch weitere Bemühungen von Nvidia im Bereich KI-gesteuerter NPCs vorgestellt, darunter ‘NeMo SteerLM’, das Charakteren ermöglicht, realistischer zu reagieren – Nvidia-Folien zeigen Charaktere mit Schiebereglern für Kreativität, Humor und Toxizität.

Es wird interessant sein, die ersten DLSS 3.5-Titel in Aktion zu sehen, also bleiben Sie dran für einige Eindrücke und Analysen, wenn wir die Möglichkeit haben, es auszuprobieren.

Die Qualitätsverbesserungen sehen beeindruckend aus und es wird interessant sein zu sehen, ob wir den gleichen KI-trainierten Denoiser sehen, der bei älteren RT-Veröffentlichungen verwendet wurde – Control könnte zum Beispiel erstaunlich aussehen…