La prochaine étape sera la transformation du texte en fichier imprimable en 3D.

Les chercheurs de l’éditeur de logiciels NVIDIA ont amélioré leur dernier modèle d’IA générative texte-3D, baptisé LATTE3D. Telle une imprimante 3D virtuelle, LATTE3D transforme en une seconde des textes en représentations 3D d’objets et d’animaux.

Conçues dans un format couramment utilisé pour les applications de rendu standard, les formes générées peuvent être facilement utilisées dans des environnements virtuels pour développer des jeux vidéo, des campagnes publicitaires, des projets de conception ou des terrains d’entraînement virtuels pour la robotique.

« Il y a un an, il fallait une heure aux modèles d’IA pour générer des visuels 3D de cette qualité, alors que l’état actuel de la technique est de 10 à 12 secondes », a déclaré Sanja Fidler, vice-présidente de la recherche en IA chez NVIDIA, dont l’équipe du laboratoire d’IA basé à Toronto a développé LATTE3D. « Nous pouvons désormais produire des résultats beaucoup plus rapidement, ce qui met la génération de texte en 3D en temps quasi réel à la portée des créateurs de tous les secteurs d’activité ».

Cette avancée signifie que LATTE3D peut produire des formes 3D presque instantanément lorsque l’inférence est exécutée sur un seul GPU, comme le NVIDIA RTX A6000, qui a été utilisé pour la démonstration de NVIDIA Research.

Imaginer, générer, itérer : Raccourcir le cycle

Au lieu de commencer une conception à partir de zéro ou de passer au peigne fin une bibliothèque de ressources 3D, un créateur peut utiliser LATTE3D pour générer des objets détaillés aussi rapidement que les idées lui viennent à l’esprit.

Le modèle génère plusieurs options de formes 3D différentes en fonction de chaque texte, ce qui permet au créateur de choisir. Les objets sélectionnés peuvent être optimisés pour une meilleure qualité en quelques minutes. Les utilisateurs peuvent ensuite exporter la forme dans des logiciels graphiques ou des plates-formes telles que NVIDIA Omniverse, qui permet des flux de travail et des applications 3D basés sur l’Universal Scene Description (OpenUSD).

Les chercheurs ont entraîné LATTE3D sur deux ensembles de données spécifiques – des animaux et des objets de la vie quotidienne – mais les développeurs pourraient utiliser la même architecture de modèle pour entraîner l’IA sur d’autres types de données.

N’oubliez pas que vous pouvez poster gratuitement les offres d’emploi de l’industrie de la FA sur 3D ADEPT Media ou rechercher un emploi via notre tableau d’offres d’emploi. N’hésitez pas à nous suivre sur nos réseaux sociaux et à vous inscrire à notre newsletter hebdomadaire : Facebook, Twitter, LinkedIn & Instagram !