Les ingénieurs de Nvidia ont lancé leur pierre avec le projet GET3D, une sorte de DALL-E pour objets 3D. À la mi-mai, nous avons croisé Shap-E, un modèle similaire développé par les gens d'OpenAI. Mais avant de créer des modèles tridimensionnels à partir de prompts, ce qui nous intéresse le plus, c'est de pouvoir transformer des images 2D en 3D sans accroc. C'est l'objectif de la plateforme CSM.

Comment convertir une image 2D en un modèle 3D avec l'IA
convertir une image 2D en un modèle 3D

L'idée de décrire des objets pour qu'un modèle d'intelligence artificielle les génère est très intéressante, mais il serait encore mieux d'alimenter ce même modèle avec une image de l'objet à reproduire. Art, pièces de rechange, pièces rares… le potentiel est gigantesque. Lentement, les algorithmes gagnent en précision, mais rien de tout cela ne servira sans facilité, et c'est là qu'apparaît le portail CSM, Common Sense Machines.

CSM : convertir des images 2D en modèles 3D

Comment convertir une image 2D en un modèle 3D avec l'IA
L'offre de modèles publics et open source est très importante

Tout ce dont vous avez besoin pour utiliser CSM est un compte (en alternative, vous pouvez utiliser des identifiants secondaires), une image de bonne qualité de l'objet à convertir (au format JPG, PNG ou WEBP), et beaucoup de patience. CSM présentera un aperçu de ses résultats, mais en cliquant sur « Generate 3D Mesh », vous devrez vous préparer à attendre plusieurs heures avant d'obtenir le fichier. Le format choisi par CSM est GLB, GL Transmission Format Binary file. Comme il s'agit d'un standard, vous n'aurez aucune difficulté à l'ouvrir avec votre logiciel préféré.

Comment convertir une image 2D en un modèle 3D avec l'IA
L'attente sera longue. Très longue.

Si vous ne voulez pas attendre, la galerie de CSM est remplie de modèles prêts à être téléchargés. Statues, animaux, arbres, nourriture, personnages de jeux vidéo et de films… vous trouverez probablement quelque chose d'utile pour vos projets personnels, sans subir de longues sessions d'entraînement. Pour finir, tous les modèles générés sous l'essai gratuit seront publics et open source, tandis que le mode Enterprise garantit un traitement plus rapide, des données d'entraînement personnalisées et la confidentialité des modèles. Un accès à l'API ? « Très bientôt ».

Site officiel : Cliquez ici