Nvidia DLSS – Deep Learning Super Sampling – a parcouru un long chemin au cours des cinq dernières années depuis son introduction. Bien que l’aspect apprentissage profond du nom demeure, les dernières itérations se sont concentrées sur d’autres techniques que le super échantillonnage. Lors de la Gamescom 2023, Nvidia a dévoilé le DLSS 3.5 avec reconstruction de rayons basée sur l’IA, la dernière fonctionnalité sous l’égide du DLSS, et elle est disponible sur tous les GPU RTX, contrairement à la génération de trames du DLSS 3.
Les GPU Nvidia RTX font partie des meilleures cartes graphiques, mais s’il y a une chose sur laquelle vous pouvez compter, c’est que les jeux et les technologies graphiques de demain seront encore plus exigeants que les offres actuelles. Tirer parti de la puissance de l’IA pour réduire une partie du travail de rendu peut potentiellement prolonger la durée de vie des anciens GPU. Cela suppose que les futurs jeux implémentent naturellement les nouvelles techniques.
Le Ray Tracing reste l’une des techniques de rendu graphique les plus exigeantes, certains diraient même le Saint Graal du rendu graphique. Le calcul des couleurs finales des pixels en fonction des réflexions, des réfractions et des propriétés physiques de divers matériaux nécessite beaucoup de puissance de calcul. Plutôt que d’effectuer des calculs de lancer de rayons sur chaque pixel de l’écran – avec plusieurs rayons par pixel – DLSS 3.5 utilise l’IA pour combler les lacunes. Nvidia appelle cela la « reconstruction de rayons ».
Le même processus peut être effectué d’autres manières, via des débruiteurs – des algorithmes conçus pour interpoler entre les pixels tracés par rayons. Il peut s’agir à la fois d’une accumulation temporelle (pixels sur plusieurs images) ou d’une interpolation spatiale (mélange entre pixels voisins). Dans les applications de rendu 3D professionnelles, vous verrez souvent plusieurs passes où les résultats initiaux sont un rendu rapide et approximatif, puis à mesure que davantage de rayons sont projetés et que les résultats s’améliorent, la nature mouchetée de la vue résultante s’améliore. DLSS 3.5 peut être utilisé à la fois dans les jeux et dans les applications avec un effet similaire.
La plupart des jeux avec effets de lancer de rayons utilisent déjà des débruiteurs pour améliorer la qualité globale, mais tout comme la mise à l’échelle des images a bénéficié de l’apprentissage en profondeur, le débruitage peut également en bénéficier. Nvidia affirme que Ray Reconstruction a été formé pour reconnaître différents effets de lancer de rayons et qu’il exploite également les pixels temporels et spatiaux pour offrir le meilleur résultat.
Pour démontrer le potentiel du DLSS 3.5, Nvidia a fourni plusieurs exemples de diapositives montrant le rendu actuel par rapport à la reconstruction Ray du DLSS 3.5.
La plupart des images DLSS 3.5 par rapport aux images « standard » devraient être assez évidentes sur ce que Ray Reconstruction apporte, mais dans Portail RTXles graphiques améliorés affichent des dégradés et un mélange beaucoup plus fluides avec moins de taches.
Pour Cyberpunk 2077, fonctionnant sous RT Overdrive, il y a plusieurs améliorations. Premièrement, il y a encore une amélioration de la qualité avec moins de taches. Les reflets sont également plus clairs, par exemple sur le toit du véhicule ou dans les flaques d’eau de la rue. Sans Ray Reconstruction, le texte (à l’envers) dans la flaque d’eau finit par être maculé et illisible, tandis qu’avec DLSS 3.5, vous pouvez distinguer les lettres. Enfin, les phares de la voiture sur la première image éclairent des objets plus éloignés comme la balustrade, ce qui semble être un changement facilité par des rayons moins nombreux et de meilleure qualité ainsi que par la reconstruction des rayons.
Nvidia a également fourni une comparaison approximative des performances dans Cyberpunk 2077 entre natif (DLSS désactivé), DLSS 2 upscalé (Super Résolution), DLSS 3 (SR plus Frame Generation) et DLSS 3.5 (SR + FG + Ray Reconstruction). On nous a dit que Cyberpunk 2077 a normalement des débruiteurs relativement complexes, et DLSS 3.5 est capable de les remplacer, ce qui entraîne une augmentation des performances ainsi qu’une qualité d’éclairage améliorée.
Enfin, comme exemple de DLSS 3.5 hors jeu, Nvidia a montré Rendu D5 fonctionnant en mode aperçu de traçage de rayons complet, avec et sans reconstruction de rayons. Sur la gauche, l’aperçu semble moucheté et tacheté. La qualité s’améliorera à mesure que vous laisserez l’appareil photo inchangé. DLSS 3.5 fournit quant à lui un résultat de bien meilleure qualité et beaucoup plus rapidement.
Encore une fois, il est important de souligner que Ray Reconstruction et DLSS 3.5 seront disponibles sur toutes les cartes graphiques RTX, de la série 20 d’origine, à la série 30 précédente, en passant par la série 40 actuelle et les offres futures. Si vous disposez d’un GPU Nvidia RTX et que vous exécutez un jeu prenant en charge DLSS 3.5, vous pouvez bénéficier de cette fonctionnalité.
En même temps, soyons clairs sur le fait que seulement profite aux jeux qui utilisent des effets de traçage de rayons, et nécessite également que les jeux adoptent DLSS 3.5. Et bien que DLSS 3.5 puisse fonctionner sur tous les GPU Nvidia RTX, il n’apportera aucun avantage aux propriétaires de GPU AMD et Intel. Cela va quelque peu limiter son attrait, mais pour les jeux qui ajoutent déjà le support DLSS 3 – qui ne fonctionne que sur les cartes RTX de la série 40 – cela semble être potentiellement au moins aussi intéressant que Frame Generation.
DLSS 3.5 sortira cet automne et un support a déjà été annoncé pour Cyberpunk 2077 : Liberté Fantôme, Portail avec RTXet Alan Wake 2. Oui, cela ne fait pas beaucoup de jeux pour le moment, mais nous prévoyons que d’autres seront annoncés dans les mois à venir. Le support sera également présent dans la plateforme Omniverse de Nvidia, Avantage du chaoset Rendu D5.
Nvidia avait également d’autres éléments d’intérêt, même si le plus excitant sera de loin l’annonce d’un mod communautaire utilisant RTX Remix pour Half Life 2. Ne soyez pas trop excité, car le travail ne fait que commencer. Il bénéficie cependant du support de Nvidia, ce qui signifie que le mod devrait éventuellement être terminé et publié plutôt que de finir comme un vaporware.
Ailleurs, Nvidia poussait GeForce NOW Ultimate, avec des SuperPods RTX 4080 (équivalents) désormais déployés aux États-Unis et en Europe et prenant en charge le streaming jusqu’à 240 ips – pour ceux qui disposent d’un moniteur 240 Hz mais pas d’un GPU puissant pour l’accompagner. La prise en charge du Xbox Game Pass arrive également sur GeForce NOW, à partir du 24 août.
Nvidia a également présenté quelques mises à jour de son moteur cloud Avatar, désormais avec SteerLM, un modèle de langage qui permet une plus grande personnalisation des types de réponses que vous pourriez obtenir d’une IA. Cela pourrait être utilisé avec les futurs jeux pour permettre aux PNJ d’avoir des réponses en temps réel à la parole humaine, ou peut-être pour des sessions de type ChatGPT plus intéressantes (mais toujours tout aussi susceptibles d’être… discutables).