Nvidia dévoile aujourd'hui une recherche sur l'intelligence artificielle qui permet pour la première fois aux développeurs de rendre des environnements 3D synthétiques et interactifs en utilisant un modèle entrainé sur des vidéos réelles. Les chercheurs de l'entreprise ont utilisé un réseau neuronal pour rendre des environnements 3D synthétiques en temps réel. Actuellement, chaque objet d'un monde virtuel doit être modélisé individuellement, ce qui est coûteux et prend du temps. En revanche, la recherche de Nvidia utilise des modèles qui ont appris automatiquement à partir de vidéos réelles pour rendre des objets tels que des bâtiments, des arbres et des véhicules.

Cette technologie offre la possibilité de créer rapidement des mondes virtuels pour le jeu, l'automobile, l'architecture, la robotique ou la réalité virtuelle. Le réseau peut, par exemple, générer des scènes interactives basées sur des lieux réels ou montrer des consommateurs dansant comme leurs pop stars préférées. Le résultat de cette recherche est un jeu de conduite simple qui permet aux participants de naviguer dans une scène urbaine. Tout le contenu est rendu de manière interactive à l'aide d'un réseau neuronal qui transforme en vidéo les esquisses d'un monde en 3D produites par un moteur graphique traditionnel. Cette démonstration interactive sera présentée à la conférence NeurIPS 2018 à Montréal.