Man sagt, die besten Effekte sind diejenigen, die unbemerkt bleiben. Das ist oft einer der Hauptunterschiede zwischen einem Projekt von hoher Qualität und einem, das zu sehr am Budget gespart hat, aber der Markt ist sehr daran interessiert, robustere Werkzeuge zu geringeren Kosten anzubieten. Das Cloak-Experiment von Adobe ist ein hervorragendes Beispiel dafür. Einfach gesagt ist Adobe Cloak die Funktion des „Inhaltsbasierten Füllens“ auf bewegte Videos angewendet. Wähle das Objekt aus, das entfernt werden soll, und lass die Software den Rest erledigen. Wie wäre es?
Adobe Cloak und das inhaltsbasierte Füllen
Eines der mächtigsten Werkzeuge in der Werkzeugkiste von Adobe Photoshop (und anderen ähnlichen Editoren) ist das inhaltsbasierte Füllen. Wir wählen das Objekt aus, das entfernt werden soll, und die Algorithmen vollbringen ihr Wunder, um das Problem zu lösen. Es versteht sich von selbst, dass das Füllen nicht immer perfekt funktioniert, was die Interaktion des Benutzers unvermeidlich macht, aber es dient in den meisten Projekten als solide Ausgangsbasis.
Nun... was ist mit Videos? Wenn du etwas aus einem Kurzfilm entfernen möchtest, ist es ideal, wenn es mit Grün oder Blau bedeckt ist, was wir dank eines sehr bekannten Films überprüfen können. Wenn die Effektabteilung ihre Arbeit nicht macht, passieren sehr lustige Dinge, die wir bei älteren Filmen verzeihen können (sagen wir, das Auto aus Braveheart, und die Gasflasche in Gladiator), aber der Rest wird bald die Hilfe von Adobe Cloak haben.
Die Funktionsweise von Adobe Cloak
Das Unternehmen sagt, dass es sich um ein einfaches Experiment handelt und dass es keine Pläne gibt, die Technologie kurzfristig zu vermarkten, aber irgendetwas sagt mir, dass sie bald ihre Meinung ändern werden. Die Demos, die Adobe der Presse zeigte, waren sehr begrenzt, und das einzige verfügbare Video hat keinen Embed (man kann es weiter unten in der Quelle sehen), aber seine Funktionsweise ist recht einfach: Cloak verfolgt das zu entfernende Objekt Bild für Bild und erweitert den Umfang der Verarbeitung auf die blaue Umrandung. Ein weiteres interessantes Detail ist, dass Cloak mit „Objekten in Objekten“ arbeitet, wie im Fall des Riemens, der über die Brust des Mannes verläuft.
Das Entfernen von Objekten in Videos hat einen grundlegenden Vorteil: Man weiß, was sich dahinter befindet. Wenn wir dazu die außergewöhnlichen Fortschritte bei der Objektverfolgung hinzufügen, ist der Traum, deinen Ex aus den Urlaubsvideos zu entfernen, näher als je zuvor (?). Natürlich hat Adobe Cloak noch viele Verbesserungen vor sich, angefangen bei der Behandlung von Schatten, aber es ist auf einem sehr guten Weg.
