NVIDIA détaille enfin le fonctionnement de DLSS 5
Après la présentation de DLSS 5, NVIDIA avait suscité de nombreuses interrogations. Les premières démonstrations avaient été critiquées pour leur rendu jugé trop artificiel, certains observateurs estimant que l'intelligence artificielle modifiait excessivement l'image générée par le jeu.
Le constructeur avait alors assuré que cette nouvelle génération de Deep Learning Super Sampling préserverait la vision artistique des développeurs tout en offrant un niveau de contrôle inédit. Lors de la conférence SIGGRAPH, NVIDIA a enfin levé le voile sur les technologies qui composent DLSS 5.
L'entreprise confirme notamment l'intégration de trois modèles d'IA distincts, de réglages indépendants pour chaque objet de la scène et d'un fonctionnement optimisé sur un seul GPU.
Une nouvelle étape dans le rendu neuronal
Contrairement aux versions précédentes, DLSS 5 intervient après le rendu classique de l'image.
Le moteur graphique continue de générer normalement :
- la géométrie ;
- les éclairages ;
- les matériaux ;
- la position de la caméra ;
- la composition générale de la scène.
DLSS 5 applique ensuite une phase de traitement neuronal destinée à améliorer plusieurs éléments visuels, notamment :
- les matériaux ;
- les ombres ;
- les réflexions ;
- les détails de surface.
NVIDIA précise que cette technologie ne remplace pas les méthodes de rendu traditionnelles (rastérisation, ray tracing ou path tracing), mais vient les compléter afin d'améliorer la qualité visuelle finale.
Trois défis techniques au cœur de DLSS 5
Pour développer cette nouvelle génération, NVIDIA affirme avoir dû relever trois défis majeurs.
Préserver l'intention artistique
Le premier objectif consistait à éviter que l'intelligence artificielle ne transforme involontairement certains éléments importants de l'image.
Des détails comme :
- les traits du visage ;
- les cicatrices ;
- les vêtements ;
- les accessoires des personnages
doivent rester parfaitement fidèles au rendu créé par les développeurs.
Pour y parvenir, DLSS 5 exploite plusieurs informations produites par le moteur graphique, notamment :
- l'albédo ;
- les normales de surface ;
- les données d'éclairage.
L'IA conserve ainsi une référence permanente au rendu d'origine afin de limiter les modifications indésirables.
Garantir une stabilité d'image parfaite
Le second défi concerne la stabilité temporelle.
Contrairement aux modèles d'IA utilisés pour la génération vidéo, un jeu vidéo ne peut pas analyser plusieurs images à l'avance puisqu'il doit réagir instantanément aux actions du joueur.
DLSS 5 traite donc chaque image individuellement en s'appuyant sur :
- les vecteurs de mouvement ;
- les données du moteur graphique.
Cette approche permet de limiter plusieurs artefacts visuels comme :
- le scintillement ;
- les déformations ;
- les effets de flottement entre deux images.
Maintenir des performances élevées
Le troisième défi concernait les performances.
NVIDIA explique avoir condensé les connaissances de modèles d'intelligence artificielle beaucoup plus volumineux dans un modèle de diffusion plus léger, spécialement conçu pour améliorer une image déjà rendue plutôt que de générer des scènes entièrement nouvelles.
Le constructeur confirme également que DLSS 5 fonctionnera sur une seule carte graphique, avec une gestion optimisée de la mémoire vidéo (VRAM). En revanche, NVIDIA ne précise pas encore si les trois modèles seront compatibles avec l'ensemble de la gamme GeForce RTX 50.
Trois modèles d'IA pour un même jeu
L'une des principales nouveautés de DLSS 5 réside dans la présence de trois modèles distincts, présentés pour l'instant sous les noms :
- Model A ;
- Model B ;
- Model C.
Chaque modèle interprète différemment une même scène afin de produire un rendu spécifique.
Les développeurs ne seront pas contraints d'utiliser un seul modèle pour l'ensemble de leur jeu. Ils pourront sélectionner le modèle le plus adapté selon :
- une scène ;
- un environnement ;
- une cinématique ;
- ou même alterner plusieurs modèles au sein d'un même titre.
Des réglages indépendants pour la structure et les couleurs
DLSS 5 introduit également deux nouveaux paramètres permettant d'ajuster précisément l'intensité du traitement par IA.
| Réglage | Effet appliqué |
|---|---|
| Structure Intensity | Renforce les détails fins comme les réflexions, l'occlusion ambiante ou la diffusion sous la surface. |
| Tone Intensity | Modifie l'éclairage, les couleurs et l'ambiance générale de la scène. |
Ces réglages permettront aux studios d'obtenir un rendu plus fidèle à leur direction artistique.
Un contrôle inédit objet par objet
L'évolution la plus marquante concerne sans doute la gestion indépendante des différents éléments affichés à l'écran.
Grâce à un système de masquage automatique, DLSS 5 est capable d'identifier un personnage et de lui appliquer un traitement spécifique sans modifier le décor environnant.
Les développeurs pourront également créer leurs propres masques directement dans le moteur graphique afin de cibler précisément certains objets.
Lors de la démonstration, NVIDIA a présenté des réglages distincts appliqués à plusieurs éléments d'une scène, notamment :
- des bouteilles ;
- une carafe ;
- des grappes de raisin ;
- divers objets décoratifs.
Chaque objet pourra bénéficier d'un niveau de traitement totalement indépendant, voire être exclu de DLSS 5.
Cette approche permettra, par exemple, de conserver un rendu entièrement traditionnel pour les personnages tout en renforçant uniquement certains éléments du décor.
Une sortie prévue dès cet automne
NVIDIA considère désormais la génération neuronale comme une troisième catégorie de rendu, aux côtés des technologies de reconstruction d'image et d'approximation de fonctions déjà utilisées dans les moteurs graphiques modernes.
Le lancement de DLSS 5 est prévu à l'automne. D'ici là, NVIDIA indique poursuivre le développement de cette technologie en collaboration avec les studios et les artistes afin d'affiner les différents modèles et leurs nombreux paramètres.
#nvidia #dlss5 #geforcertx #ia
