Des images aux chats, des chats aux animations, transcriptions, musiques, vidéos… oui, l'intelligence artificielle est déjà arrivée dans tous ces domaines, mais il lui reste encore une case à cocher : la génération d'objets 3D. En septembre de l'année dernière, Nvidia nous parlait de son système GET3D. C'est maintenant au tour d'OpenAI, qui après avoir présenté Point-E, a décidé de publier sur GitHub le code de son modèle Shap-E, avec la promesse de créer des modèles 3D à partir d'une simple description.
Le battage médiatique autour de l'intelligence artificielle n'a pas perdu de son intensité. Au contraire, le nombre de services en ligne ne cesse de croître, et nous avons déjà vu presque tout, des stations de radio aux assistants virtuels sur WhatsApp. Les conflits éthiques et juridiques sont encore loin d'être résolus, mais s'il y a une chose qui peut échapper à ce bruit, c'est bien la génération d'objets 3D.
L'équipe d'OpenAI cherche à aller dans cette direction avec un nouveau projet appelé Shap-E. En substance, ce qu'OpenAI a fait, c'est publier le code, mais il manque encore beaucoup d'informations. Le profil Shap-E sur GitHub manque d'instructions avancées et ne décrit même pas les dépendances nécessaires, mais ceux qui réussiront à l'installer auront deux avantages : Fonctionne hors ligne, et ne dépend pas de l'API d'OpenAI.
Shap-E : les premiers pas du texte vers la 3D
Les modes de fonctionnement sont au nombre de trois : texte vers 3D, image vers 3D (c'est-à-dire une conversion 2D -> 3D), et Encode, qui utilise Blender pour prendre un objet 3D et le transformer en quelque chose de différent. Logiquement, Shap-E nécessite beaucoup de puissance, et les premiers explorateurs recommandent du matériel Nvidia pour commencer. Même avec une GeForce RTX 3080, le rendu d'un modèle peut prendre entre quatre et cinq minutes.
Ses résultats sont définitivement basiques, et les erreurs apparaissent partout… mais ce n'est pas mal pour une version initiale. D'une installation (beaucoup) plus simple à des améliorations de performances, nous espérons que Shap-E gagne du terrain. Le potentiel du texte vers 3D est gigantesque, et si ses modèles atteignent une qualité adaptée à l'impression… le ciel est la limite.
Site officiel : Cliquez ici
Source : Tom's Hardware
