Wanneer we afbeeldingen genereren met kunstmatige intelligentie, hebben we in werkelijkheid veel minder controle dan we denken. We kunnen weliswaar aan behoorlijk diepgaande prompt engineering doen, maar op een gegeven moment moeten we gewoon de dobbelstenen gooien. Een project genaamd DragGAN introduceert echter een nieuwe generatie dynamische bewerking op basis van puntmanipulatie, waarmee de gebruiker het uiterlijk, de positie en de hoek van mensen en objecten in een afbeelding relatief eenvoudig kan wijzigen.
Iedereen die heeft geëxperimenteerd met Midjourney, Stable Diffusion of andere modellen voor beeldgeneratie weet dat hetzelfde prompt zeer verschillende resultaten kan opleveren. De meest effectieve manier om ze te herhalen is door de seed van de afbeelding te behouden, maar als we op zoek zijn naar een kleine hoekverandering, een glimlach of het corrigeren van een specifieke fout, is het prompt niet het beste hulpmiddel. Er zijn te veel variabelen in het spel en de kans is groot dat het model simpelweg niet meewerkt.
Dat brengt ons bij beeldbewerking, en een nieuw project genaamd DragGAN belooft werkelijk revolutionair te zijn. Op het web wordt het al omschreven als een 'moordenaar van Photoshop', of als een veel geavanceerdere en krachtigere versie van de Warp-functie. In essentie kan de gebruiker de algemene toestand van een afbeelding manipuleren via een reeks punten, waarbij profielen, richtingen en stijlen worden gewijzigd... maar de beste manier om het uit te leggen is met een video.
DragGAN: de toekomst van beeldbewerking?
Met de hulp van DragGAN kan elke gebruiker een afbeelding vervormen zonder controle over de richting van de pixels op te geven, en daadwerkelijk aspecten zoals pose, expressie of de algemene opstelling van dieren, auto's, mensen, landschappen en meer wijzigen. De demonstratie is versneld en doet ons vermoeden dat DragGAN behoorlijk wat verwerkingskracht vereist, maar dat maakt het niet minder indrukwekkend. Integendeel: de tussenkomst van de gebruiker is beperkt tot het definiëren van manipulatiepunten (rood) en bestemmingspunten (blauw). Als alternatief is er ook de mogelijkheid om een masker te tekenen om het flexibele gebied te beperken en de rest van de afbeelding te negeren/isoleren.
Ik denk dat we enige tijd moeten wachten voordat we de eerste voorgecompileerde tools zien, maar met zo'n potentieel is elke vertraging de moeite waard. DragGAN gaat veel verder dan de klassieke beeldbewerking en verandert de essentie ervan volledig. Als je meer demo's wilt zien, staat de link naar de officiële pagina hieronder.
Officiële aankondiging en PDF: Klik hier