cherche à simplifier la création de mondes 3D virtuels avec un nouveau modèle. GET3D peut générer des personnages, des bâtiments, des véhicules et d’autres types d’objets 3D, explique NVIDIA. Le modèle devrait également être capable de créer rapidement des formes. La société note que GET3D peut générer environ 20 objets par seconde à l’aide d’un seul GPU.
Les chercheurs ont formé le modèle à l’aide d’images 2D synthétiques de formes 3D prises sous plusieurs angles. NVIDIA affirme qu’il n’a fallu que deux jours pour alimenter environ 1 million d’images dans GET3D à l’aide de GPU A100 Tensor Core.
Le modèle peut créer des objets avec « des textures haute fidélité et des détails géométriques complexes », a déclaré Isha Salian de NVIDIA. Les formes réalisées par GET3D « sont sous la forme d’un maillage triangulaire, comme un modèle en papier mâché, recouvert d’un matériau texturé », a ajouté Salian.
Les utilisateurs devraient être en mesure d’importer rapidement les objets dans les moteurs de jeu, les modélisateurs 3D et les rendus de films pour les éditer, car GET3D les créera dans des formats compatibles. Cela signifie qu’il pourrait être beaucoup plus facile pour les développeurs de créer des mondes virtuels denses pour les jeux et le métaverse. NVIDIA a cité la robotique et l’architecture comme autres cas d’utilisation.
La société a déclaré que, sur la base d’un ensemble de données de formation d’images de voitures, GET3D était capable de générer des berlines, des camions, des voitures de course et des fourgonnettes. Il peut également produire des renards, des rhinocéros, des chevaux et des ours après avoir été dressé sur des images d’animaux. Comme on peut s’y attendre, NVIDIA note que plus l’ensemble de formation fourni à GET3D est vaste et diversifié, « plus la sortie est variée et détaillée ».
Avec l’aide d’un autre outil NVIDIA AI, il est possible d’appliquer différents styles à un objet avec des invites textuelles. Vous pouvez appliquer un look brûlé à une voiture, convertir un modèle de maison en maison hantée ou, comme le suggère une vidéo montrant la technologie, appliquer des rayures de tigre à n’importe quel animal.
L’équipe NVIDIA Research qui a créé GET3D pense que les futures versions pourraient être formées sur des images du monde réel au lieu de données synthétiques. Il peut également être possible de former le modèle sur différents types de formes 3D à la fois, plutôt que de devoir se concentrer sur une catégorie d’objets à un moment donné.
Tous les produits recommandés par Engadget sont sélectionnés par notre équipe éditoriale, indépendante de notre maison mère. Certaines de nos histoires incluent des liens d’affiliation. Si vous achetez quelque chose via l’un de ces liens, nous pouvons gagner une commission d’affiliation. Tous les prix sont corrects au moment de la publication.