De mensen van Nvidia gooiden hun steentje bij met het GET3D-project, een soort DALL-E voor 3D-objecten. Halverwege mei kwamen we Shap-E tegen, een vergelijkbaar model ontwikkeld door de mensen van OpenAI. Maar voordat we driedimensionale modellen maken met prompts, is het belangrijkste voor ons het transformeren van 2D-afbeeldingen naar 3D zonder hobbels. Dat is het doel van het CSM-platform.
Het idee om objecten te beschrijven zodat een AI-model ze genereert is erg interessant, maar nog beter zou zijn om datzelfde model te voeden met een afbeelding van het te reproduceren object. Kunst, reserveonderdelen, zeldzame stukken… de potentie is gigantisch. Langzaamaan winnen de algoritmen aan precisie, maar dat heeft geen zin zonder gebruiksgemak, en dan verschijnt het CSM-portaal, Common Sense Machines.
CSM: converteer 2D-afbeeldingen naar 3D-modellen
Alles wat je nodig hebt om CSM te gebruiken is een account (als alternatief kun je secundaire inloggegevens gebruiken), een afbeelding van goede kwaliteit van het te converteren object (in JPG-, PNG- of WEBP-formaat), en veel geduld. CSM toont een voorproefje van de resultaten, maar als je op «Generate 3D Mesh» klikt, moet je je voorbereiden op enkele uren wachten voordat je het bestand krijgt. Het door CSM gekozen format is GLB, GL Transmission Format Binary file. Omdat dit een standaard is, zul je geen problemen hebben om het te openen met je favoriete software.
Nu, als je niet wilt wachten, zit de CSM-galerij vol met modellen die klaar zijn om te downloaden. Beelden, dieren, bomen, eten, videogame- en filmpersonages… de kans is groot dat je iets nuttigs vindt voor je persoonlijke projecten, zonder lange trainingssessies. Tot slot: alle gegenereerde modellen onder de gratis trial worden publiek en open source, terwijl de Enterprise-modus zorgt voor snellere verwerking, gepersonaliseerde trainingsdata en privacy voor de modellen. Toegang tot de API? «Binnenkort».
Officiële site: Klik hier