Die KI von Disney kann die Gesichter von Schauspielern in Sekunden altern (oder altern lassen).

Disney-Forscher haben eine neue enthüllt KI Werkzeug, mit dem die Gesichter von Schauspielern in Filmmaterial im Handumdrehen jünger oder älter aussehen können. Disney Research, der Innovationsarm des Unternehmens, gibt es seit über einem Jahrzehnt und erforscht Möglichkeiten, die Grenzen des visuellen Geschichtenerzählens mit Technologie zu verschieben. Es hat sich in den letzten Jahren stark auf künstliche Intelligenz und maschinelles Lernen sowie auf Robotik und Augmented Reality konzentriert.

Ein wichtiger Bestandteil der Arbeit von Disney Research ist natürlich die Verbesserung der Animation Techniken und damit verbundene Effekte, sowohl um die Produktion effizienter zu gestalten als auch mehr schaffen Immersive Erlebnisse für Verbraucher. Seine Forscher haben in der Vergangenheit Technologien entwickelt, mit denen Menschen fühlen können, was sie sehen, einschließlich taktile Effekte für ein Feuerwerk und Touchscreens, die die Textur der Objekte simulieren können Anzeige. Disney hat auch hart daran gearbeitet, die Automatisierung in den Bearbeitungs- und Animationsprozess zu integrieren.

Der neues Werkzeug beschrieben in Papier aus Disney-Forschungsstudios, das als Face Re-Aging Network (FRAN) bezeichnet wird, zielt darauf ab, die äußerst mühsame Aufgabe zu lösen, ein zu verändern das Alter des Schauspielers im Video – etwas, das normalerweise von Hand gemacht wird, Bild für Bild über Stunden oder sogar Tage. FRAN kann dasselbe in weniger als fünf Sekunden tun. Die vollautomatische Technik kann vorhandenes Filmmaterial übernehmen und Altern Sie das Thema vorwärts oder rückwärts, ein junges Gesicht um Jahrzehnte älter erscheinen zu lassen und umgekehrt. Und laut Team ist es produktionsbereit.

Disneys Face Re-Aging Network

In einem in der Veröffentlichung hervorgehobenen Beispiel wurde FRAN beauftragt, gealterte Versionen von vier Personen (im Alter von 34, 35, 45 und 18 Jahren) aus Standbildern in 10-Jahres-Intervallen zwischen 20 und 80 Jahren zu erstellen. Die Ergebnisse sind durchweg realistisch und stimmen mit den Ausgangsfotos der Probanden überein, wobei bei jeder Iteration erkennbar bleibt, ob sie jünger oder älter gemacht wurden. Das Team zeigte auch seine Fähigkeit, Videoeingänge abzuarbeiten, wobei FRAN erfolgreich alterte und Entalterung von Motiven trotz Körper- und Kamerabewegungen und Bedingungen wie Beleuchtung oder Bewegungsunschärfe Auswirkungen.

Die Technologie baut auf Bestehendem auf Entwicklungen im maschinellen Lernen, insbesondere Generative Adversarial Networks (GAN), die realistische Ergebnisse bei der digitalen Re-Aging von synthetischen Gesichtern erzielt haben. “FRAN wird auf einfache überwachte Weise trainiert, indem ein großer Längsschnittdatensatz von fotorealistisch gealterten, synthetischen Gesichtspaaren genutzt wird“, erklären die Autoren. “Als Ergebnis bietet FRAN ein realistisches und kontinuierliches Re-Aging in einem Altersbereich von 18 bis 85 Jahren.”

Es hat jedoch seine Grenzen. Wie die Forscher bemerken, lässt FRAN den Haaransatz des Subjekts unverändert, unabhängig davon, in welche Richtung es sich im Alter bewegt, und Es wurde nicht an den Gesichtern kleiner Kinder ausprobiert, die sich in Form und Struktur stärker verändern als sie entwickeln. Dennoch wird FRAN als die erste Technik ihrer Art angepriesen, die Nutzbarmachung das Neueste KI Methoden um reibungslose, glaubwürdige Videoergebnisse mit beispielloser Leichtigkeit zu erzeugen.

Quelle: DisneyForschung| Studios, DisneyResearchHub/YouTube