La technologie DLSS 5 de NVIDIA continue de dévoiler ses secrets au fil des semaines, et les récentes révélations techniques permettent de mieux comprendre comment fonctionne concrètement ce système d’upscaling dopé à l’intelligence artificielle générative. Un échange entre le YouTuber Daniel Owen et Jacob Freeman, évangéliste GeForce chez NVIDIA, lève le voile sur l’architecture fondamentale du pipeline de traitement.

Une approche 2D, pas 3D

Le point le plus surprenant, et pourtant logique d’un point de vue optimisation, c’est que DLSS 5 opère exclusivement dans un espace 2D. Concrètement, le modèle d’IA générative prend en entrée deux éléments : une frame 2D et des vecteurs de mouvement. Il ne travaille pas sur la géométrie 3D de la scène, ni sur les données brutes du moteur de jeu. À la place, il analyse chaque image comme une photo à plat, s’appuie sur les vecteurs de mouvement pour comprendre ce qui bouge et dans quelle direction, puis génère un résultat enrichi. 

Cette distinction est cruciale pour saisir ce que DLSS 5 fait réellement. Bien que le modèle ait été entraîné sur des matériaux visuellement tridimensionnels, il n’intervient jamais sur la géométrie sous-jacente du jeu. Aucune donnée 3D n’est modifiée : le pipeline reste ancré dans le domaine 2D, ce qui lui confère un avantage considérable en termes d’efficacité de calcul.

Pourquoi ce choix technique ?

La raison est simple : atteindre un photoréalisme complet en manipulant directement des scènes 3D nécessiterait une puissance GPU bien supérieure à ce que le matériel actuel peut offrir, même haut de gamme. En restant dans un espace 2D, NVIDIA contourne cette contrainte tout en obtenant des résultats visuellement convaincants. Le modèle génératif se charge d’améliorer les textures et d’appliquer une forme de photoréalisme scénique sur l’image finale, sans jamais toucher à la structure géométrique du rendu d’origine.

Le pipeline DLSS 5 en résumé

Pour mieux visualiser le fonctionnement de la chaîne de traitement, voici les étapes clés telles que décrites par NVIDIA :

Étape	Description
Entrée	Frame 2D + vecteurs de mouvement
Traitement	Modèle d’IA générative ancré sur les vecteurs de mouvement
Espace de travail	2D uniquement, pas de manipulation de géométrie 3D
Améliorations appliquées	Enrichissement des textures, photoréalisme de la scène
Sortie	Frame finale upscalée et améliorée visuellement

Ce positionnement technique distingue clairement DLSS 5 de ses prédécesseurs. Là où les versions précédentes s’appuyaient davantage sur des techniques d’accumulation temporelle classiques, la cinquième itération mise sur la génération d’image par IA pour compléter et enrichir chaque frame. Pour les joueurs PC, cela se traduit par des gains de performances potentiellement très significatifs, couplés à une qualité visuelle que NVIDIA présente comme supérieure, le tout sans que votre GPU ait à recalculer la moindre donnée géométrique.

« Le modèle identifie les vecteurs de mouvement de chaque frame et s’y ancre, en opérant dans un espace 2D plutôt que dans un environnement 3D complet. »

– Jacob Freeman, évangéliste GeForce chez NVIDIA

Il reste encore de nombreuses zones d’ombre autour de DLSS 5, notamment concernant la compatibilité avec les jeux existants, les artefacts potentiels liés à la génération d’images par IA, et bien sûr les GPU qui seront nécessaires pour en profiter pleinement. Les prochaines semaines devraient apporter leur lot de précisions supplémentaires à mesure que NVIDIA officialise le déploiement de cette technologie.