Lorsque nous générons des images avec l'intelligence artificielle, nous avons en réalité beaucoup moins de contrôle que nous l'imaginons. Bien que nous puissions faire une ingénierie de prompts assez approfondie, il arrive un moment où nous devons essentiellement lancer les dés. Cependant, un projet nommé DragGAN présente une nouvelle génération d'édition dynamique basée sur la manipulation de points, permettant à l'utilisateur d'altérer l'apparence, la position et l'angle de personnes et d'objets dans une image avec une relative facilité.
Quiconque a expérimenté avec Midjourney, Stable Diffusion ou autres modèles de génération d'images sait qu'un même prompt peut produire des résultats très différents. La façon la plus efficace de les répéter est de conserver la semence (seed) de l'image, mais si nous recherchons un léger changement d'angle, un sourire, ou la correction d'une erreur spécifique, le prompt n'est pas la meilleure ressource pour le faire. Il y a trop de variables en jeu, et il est fort probable que le modèle ne coopère tout simplement pas.
Cela nous amène à l'édition d'images, et un nouveau projet nommé DragGAN promet d'être véritablement révolutionnaire. Sur le Web, on le décrit déjà comme « tueur de Photoshop », ou une version beaucoup plus avancée et puissante de sa fonction Warp. En substance, l'utilisateur peut manipuler la condition générale d'une image à travers une série de points, changeant profils, directions et styles… mais la meilleure façon de l'expliquer est avec une vidéo.
DragGAN : l'avenir de l'édition d'images ?
Avec l'assistance de DragGAN, tout utilisateur peut déformer une image sans sacrifier le contrôle sur la direction des pixels, modifiant efficacement des aspects tels que la pose, l'expression, ou la disposition générale d'animaux, de voitures, d'humains, de paysages, et plus encore. La démonstration est accélérée, et nous fait soupçonner que DragGAN nécessite une puissance de traitement assez importante, mais cela n'en reste pas moins impressionnant. Tout au contraire : l'intervention de l'utilisateur se réduit à définir les points de manipulation (rouge) et les points de destination (bleu). En alternative, il est également possible de dessiner un masque pour limiter la région flexible, et ignorer/isoler le reste de l'image.
J'imagine qu'il faudra attendre un certain temps avant de voir les premiers outils précompilés, mais avec un tel potentiel, tout retard en vaudra la peine. DragGAN va bien au-delà de l'édition d'images classique, changeant complètement son essence. Si vous souhaitez voir plus de démos, le lien vers la page officielle apparaît ci-dessous.
Annonce officielle et PDF : cliquez ici