Disney tehisintellekt võib vanandada (või vanandada) näitlejate nägusid sekunditega
Disney Research Studios tutvustab oma äsja väljatöötatud näo taasvanandamise võrgustikku (FRAN), tehisintellekti tööriista, mis võib videos näitleja vanust koheselt muuta.
Disney teadlased avalikustasid uue AI tööriist, mis muudab filmitud näitlejate näod hetkega nooremaks või vanemaks. Disney Research, ettevõtte innovatsiooniharu, on tegutsenud juba üle kümne aasta, uurides viise, kuidas tehnoloogia abil visuaalse jutuvestmise piire nihutada. See on viimastel aastatel pööranud suurt tähelepanu tehisintellektile ja masinõppele koos robootika ja liitreaalsusega.
Disney Researchi töö põhikomponent on loomulikult keskendunud animatsiooni täiustamisele tehnikaid ja nendega seotud mõjusid nii tootmise tõhusamaks muutmiseks kui ka luua rohkem kaasahaaravad kogemused tarbijatele. Selle teadlased on varem välja töötanud tehnoloogiaid, et inimesed tunneksid seda, mida nad näevad, sealhulgas puutetundlikud efektid ilutulestiku jaoks ja puuteekraanid, mis võivad simuleerida nende objektide tekstuuri kuva. Disney on ka kõvasti tööd teinud selle nimel, et redigeerimis- ja animeerimisprotsessi automatiseerida.
The uus tööriist aastast paberil kirjeldatud Disney uurimisstuudiod, mida nimetatakse näo taasvananemise võrgustikuks (FRAN), mille eesmärk on lahendada äärmiselt tüütu ülesanne muuta näitleja vanuseline esinemine videos – midagi, mida tehakse tavaliselt käsitsi, kaader kaadri haaval tundide jooksul või isegi päevadel. FRAN suudab sama teha vähem kui viie sekundiga. Täisautomaatne tehnoloogia suudab jäädvustada olemasolevaid kaadreid ja vanustada objekti ette või taha, muutes noore näo aastakümneid vanemaks ja vastupidi. Ja meeskonna sõnul on see tootmisvalmis.
Disney näo vananemise võrgustik
Ühes dokumendis esile tõstetud näites sai FRAN-i ülesandeks genereerida 10-aastaste intervallidega 20-80-aastaste fotode põhjal nelja subjekti (vanuses 34, 35, 45 ja 18) vanandatud versioonid. Tulemused on üldiselt realistlikud ja kooskõlas subjektide algfotodega, jäädes igas iteratsioonis äratuntavaks, olenemata sellest, kas nad on tehtud nooremaks või vanemaks. Meeskond näitas ka oma võimet kasutada videosisendeid, kuna FRAN vananes edukalt ja vananemist, hoolimata keha ja kaamera liikumisest ning sellistest tingimustest nagu valgustus või udune liikumine mõjusid.
Tehnoloogia põhineb olemasoleval masinõppe arengud, konkreetselt generatiivsed konkureerivad võrgud (GAN), mis on andnud realistlikke tulemusi sünteetiliste nägude digitaalselt uuesti vananemisel. “FRAN-i koolitatakse lihtsa järelevalvega, kasutades suurt pikisuunalist andmekogu fotorealistlikult taasvanandatud sünteetilistest näopaaridest.,” selgitavad autorid. “Selle tulemusena pakub FRAN realistlikku ja pidevat vananemist vanuses 18 kuni 85 aastat.”
Sellel on siiski oma piirangud. Nagu teadlased märgivad, jätab FRAN katsealuse juuksepiiri selliseks, nagu see on, olenemata sellest, millises suunas see vanuses liigub, ja seda ei ole proovitud väikeste laste nägudel, mille kuju ja struktuur muutuvad samaaegselt rohkem areneda. Siiski reklaamitakse FRAN-i kui esimest omataolist tehnikat, rakendamist Viimane AI meetodid luua sujuvaid ja usutavaid videotulemusi enneolematu kergusega.
Allikas: DisneyResarch| Stuudiokorterid, DisneyResearchHub/YouTube