De zogenaamde prompt engineering is essentieel om goede resultaten te krijgen met generatoren zoals Stable Diffusion. Wanneer we praten over het beschrijven van een afbeelding, gaat het eigenlijk om het creëren van een structuur met speciale kenmerken en elementen die reageren op zeer subtiele details, inclusief de positie. De nieuwe «Libro de Prompts para Stable Diffusion» gepubliceerd door OpenArt is een uitstekend startpunt dat je zal helpen om twijfels op te lossen, en waarom niet, je huidige vaardigheden aan te scherpen bij het ontwikkelen van unieke prompts.
De generatie van afbeeldingen met kunstmatige intelligentie is over het hele web ontploft. Sociale media zijn het ideale thuis geworden voor deze nieuwe golf van kunst, met enkele duidelijke trends (bijvoorbeeld Instagram is dol op Midjourney). De platforms en mobiele apps blijven zich vermenigvuldigen, net als het aantal gebruikers dat geïnteresseerd is in de praktijk. En dat leidt ons onvermijdelijk naar het concept van 'prompt': Voordat je een afbeelding genereert, hebben de algoritmen een beschrijving nodig... en er valt hier veel te leren.
Dit is vooral waar bij Stable Diffusion. Zijn open source model maakt het flexibeler, en dat betekent dat de prompts een zeer breed werkterrein hebben. Tegelijkertijd is de leercurve iets veeleisender, en het is niet moeilijk om in frustratie te vervallen met de eerste sets afbeeldingen. Gelukkig heeft het team van OpenArt de Stable Diffusion Prompt Book gepubliceerd, een boek dat je zal helpen om de basisconcepten van prompt engineering onder de knie te krijgen en de kwaliteit van je resultaten te optimaliseren.
Wat is de Stable Diffusion Prompt Book?
Het boek is niet overdreven technisch en staat vol met voorbeelden en afbeeldingen om te vergelijken. De introductie tot prompt engineering raadt je aan om jezelf een paar vragen te stellen voordat je begint:
- Wil je een foto of een schilderij?
- Wat is het onderwerp van het werk? Een persoon, een dier, een landschap?
- Wat voor details wil je? Wat voor licht stel je je voor voor de scène? Wat is de omgeving?
- Zoek je een specifieke stijl? 3D-graphics? Een poster? Olieverf op doek?
Daarna volgt de volgorde van de woorden, die van groot belang is voor elke prompt. Soms negeert het algoritme een deel van onze beschrijving omdat het dit niet zo belangrijk vindt als wij, maar als we die elementen naar voren halen, verandert het gedrag van Stable Diffusion (en bij uitbreiding het resultaat) volledig.
Het derde deel van het boek richt zich op modifiers, die ons in staat stellen om de stijl, het formaat of het perspectief van de afbeeldingen te wijzigen. Daarnaast is er een reeks «magische woorden» die gebruikers de afgelopen maanden hebben ontdekt en die een enorme impact hebben.
Fotografie heeft ook zijn eigen categorie, met een overzicht van expressies om bepaalde effecten te bereiken. Het is ook erg nuttig om de brandpuntsafstand en het cameramodel in de prompt op te nemen: als je bijvoorbeeld iets toevoegt in de stijl van «Nikon D850, 50mm», zal het algoritme proberen die combinatie na te bootsen. Als alternatief kun je verwijzen naar apparaten zoals GoPro, iPhone, drones of zelfs CCTV voor die speciale 'gesloten circuit'-touch.
Een ander deel dat ik wil noemen is dat van de media. De keuze ervan kan het uiterlijk van een afbeelding drastisch veranderen, zelfs als we het grootste deel van de prompt of de seed herhalen. In sommige gevallen is het het beste om de weg van olieverfschilderijen of graffiti te volgen, maar je kunt ook experimenteren met elementen zoals hout of klei. Als je plan is om portretten te maken, zijn potloodtekeningen uitstekend.
En tot slot de namen van kunstenaars. Als je sommige prompts op Lexica en OpenArt van dichterbij bekijkt, zie je dat gebruikers bepaalde namen herhalen om een specifieke stijl te bereiken. Een van de meest voorkomende combinaties is die van Stanley Artgerm Lau, de Poolse kunstenaar Greg Rutkowski en Alphonse Mucha, maar het zou een grote fout zijn om buiten die selectie te blijven. Sterker nog, de WebUI voor de offline versie van Stable Diffusion heeft een knop die willekeurig kunstenaars kiest, en die verdient zeker je aandacht.
Het Stable Diffusion Prompt Book is een creatie van Julián Herrera, Musical Sleep, Bob Chernow, Coco Mao en Mohamad Diab, die we veel beter kennen van zijn fantastische project Public Prompts. De laatste update is van 28 oktober, en je kunt de PDF volledig gratis downloaden, zonder beperkingen of inloggegevens. Mis het niet!
Officiële site en download: Klik hier