La création de contenu en 3D a toujours été un frein pour la création d’expériences de réalité augmentée de qualité…. mais plus pour longtemps ?
Le nouveau modèle d’IA de NVIDIA qui génère rapidement des objets et des personnages pour les mondes virtuels devrait apporter un début de solution très bientôt ! ??
Entraîné à partir d’images 2D, NVIDIA GET3D génère des formes 3D avec des textures haute-fidélité et des détails géométriques complexes. Ces objets 3D sont créés dans le même format que celui utilisé par les logiciels graphiques les plus courants, ce qui permet aux utilisateurs de le réutiliser pour des expériences de Réalité Augmentée.
GET3D peut avec un ensemble de données d’entraînement d’images de voitures en 2D, par exemple, créer une collection de berlines, de camions, de voitures de course et de fourgonnettes. Entraîné sur des images d’animaux, il produit des créatures telles que des renards, des rhinocéros, des chevaux et des ours. Avec des chaises, le modèle génère un assortiment de fauteuils pivotants, de chaises de salle à manger et de fauteuils inclinables confortables.
Mais cela ne s’arrête pas là, une fois que les créateurs ont exporté les formes générées par GET3D vers une application graphique, ils peuvent appliquer des effets de lumière réalistes lorsque l’objet se déplace ou tourne dans une scène. En incorporant un autre outil d’IA de NVIDIA Research, StyleGAN-NADA, les développeurs peuvent utiliser des invites textuelles pour ajouter un style spécifique à une image, comme modifier une voiture rendue pour en faire une voiture brûlée ou un taxi, ou transformer une maison ordinaire en une maison hantée…
Plus d’infos ici
