Adobe Cloak: slim objecten verwijderen uit video
Adobe Cloak

Er wordt gezegd dat de beste effecten degenen zijn die onopgemerkt blijven. Dat is meestal een van de belangrijkste verschillen tussen een kwaliteitsproject en een project dat te veel op het budget heeft bezuinigd, maar de markt is erg geïnteresseerd in het uitbrengen van robuustere tools tegen lagere kosten. Het Cloak-experiment van Adobe is daar een uitstekend voorbeeld van. In eenvoudige termen is Adobe Cloak de functie van "inhoudsbewust vullen" toegepast op bewegend beeld. Je selecteert het object dat je wilt wissen en laat de software het verder afhandelen. Hoe klinkt dat?

Een van de krachtigste functies in het arsenaal van Adobe Photoshop (en vergelijkbare editors) is het inhoudsbewust vullen. We selecteren het object dat verwijderd moet worden en de algoritmen doen hun magie om het probleem op te lossen. Het spreekt voor zich dat het vullen niet altijd perfect werkt, waardoor tussenkomst van de gebruiker onvermijdelijk is, maar het dient als een solide startpunt in de meeste projecten. En hoe zit het met video? Als je iets uit een filmpje wilt verwijderen, is het ideaal als het bedekt is met groen of blauw, iets wat we kunnen zien dankzij een zeer populaire film. Wanneer de effectenafdeling haar werk niet doet, gebeuren er grappige dingen die we oudere films kunnen vergeven (denk aan de auto in Braveheart en de benzinetank in Gladiator), maar de rest zal binnenkort hulp krijgen van Adobe Cloak.

Adobe Cloak: slim objecten verwijderen uit video
Het kan iets subtiels zijn, zoals de riem van een rugzak...

Het bedrijf zegt dat het slechts een experiment is en dat er geen plannen zijn om de technologie op korte termijn op de markt te brengen, maar ik heb het gevoel dat ze snel van gedachten zullen veranderen. De demo's die Adobe aan de pers liet zien waren zeer beperkt, en de enige beschikbare video heeft geen embed (je kunt hem hieronder in de bron bekijken), maar de werking is vrij eenvoudig: Cloak volgt het te verwijderen object frame voor frame en breidt de verwerking uit naar de blauwe rand. Een ander interessant detail is dat Cloak werkt met "objecten binnen objecten", zoals in het geval van de riem die over de borst van de man loopt.

Adobe Cloak: slim objecten verwijderen uit video
... of een complete paal.

Het verwijderen van objecten in video heeft een fundamenteel voordeel, namelijk weten wat erachter zit. Als we daaraan de buitengewone vooruitgang in het volgen van objecten toevoegen, is de droom om je ex uit vakantievideo's te wissen dichterbij dan ooit (?). Natuurlijk heeft Adobe Cloak nog veel te verbeteren, te beginnen met de omgang met schaduwen, maar het gaat de goede kant op.

Bron: