https://frosthead.com

Uus tarkvara suudab näitlejate näoilmeid tegelikult redigeerida

Filmis stseeni salvestamine võib vajada kümneid, mõnikord isegi rohkem pilte. Filmis Gone Girl oli režissöör David Fincheri sõnul keskmiselt 50 võttekohta stseeni kohta. Suhtlusvõrgustiku näitlejate jaoks tegutsesid Rooney Mara ja Jesse Eisenberg avastseeni 99 korda (lavastaja jälle Fincher; ilmselt on ta selle jaoks kurikuulus). Stanley Kubricku sari „ The Shining ietvert 127“ võtab kurikuulsa stseeni, kus Wendy varjab Jacki pesapallikurikaga trepist treppe, mida peetakse ajaloo kõigi filmide kõige rohkem stseenideks.

Disney Researchi koostöös Surrey ülikooliga loodud uus tarkvara võib aidata vähendada vajalike kulutuste arvu, säästes sellega aega ja raha. FaceDirector ühendab pilte mitmest pildistamisest, võimaldades näitlejate nägudes täpseid emotsioone redigeerida.

„Filmi tootmine võib olla väga kallis, seetõttu oli selle projekti eesmärk proovida protsessi efektiivsemaks muuta, “ ütleb tarkvara väljatöötamisel Zürichi Disney Researchi arvutiteadlane Derek Bradley.

Disney Research on Los Angeleses, Pittsburghis, Bostonis ja Zürichis asuv rahvusvaheline uurimislaborite rühm, mis keskendub sellistele uuendustele, mis võivad Disneyle kasulikud olla. Viimased projektid hõlmavad seina ronimisrobotit, „liitreaalsuse värvimisraamatut“, kus lapsed saavad värvida pilti, mis muutub rakenduses liikuvaks 3D-tähemärgiks, ja vest lastele, mis pakub selliseid aistinguid nagu vibratsioon või vihmapiiskade tunne, mis vastaks juturaamatute stseenid. FaceDirectori taga olev meeskond töötas projekti kallal umbes aasta, enne kui tutvustas oma uurimistööd möödunud aasta detsembris Tšiilis Santiagos rahvusvahelisel arvutinägemise konverentsil.

Projekti peamine eesmärk ja suurim väljakutse oli erinevate väljavõtete sünkroonimise väljamõtlemine. Näitlejatel võib olla pea kuklast erineva nurga alt, kui võtta, rääkida eri toonides või teha paus erinevatel aegadel. Selle lahendamiseks lõi meeskond programmi, mis analüüsib näoilmeid ja helivõtteid. Näoilmeid jälgitakse näo orientiiride, nagu silmade ja suu nurkade kaardistamisega. Seejärel määrab programm, millised kaadrid võivad üksteisega sobituda, näiteks pusletükid. Igal pusletükil on mitu kaaslast, nii et režissöör või toimetaja saab seejärel otsustada, milline on parim kombinatsioon soovitud näoilme loomiseks.

Materjali loomiseks, mille abil katsetada, tõi meeskond rühma õpilasi Zürichi kunstikoolist. Õpilased tegid mitu dialoogi, kasutades iga kord erinevaid näoilmeid - rõõmsad, vihased, elevil ja nii edasi. Seejärel suutis meeskond tarkvara kasutada suvalise arvu näoilmete kombinatsioonide loomiseks, mis edastasid nüansseeritumaid emotsioone - kurb ja natuke vihane, erutatud, kuid kartlik jne. Nad suutsid ühendada mitu - näiteks hirmunud ja neutraalset - võimet tekitada tõusvaid ja langevaid emotsioone.

FaceDirectori meeskond pole kindel, kuidas või millal tarkvara võib saada kaubanduslikult kättesaadavaks. Toode töötab endiselt kõige paremini, kui seda kasutatakse stseenidega, mis on filmitud staatilise tausta ees istudes. Liikuvad näitlejad ja liikuvad väljas olevad maastikud (mõelge puude kiskumisele, mööduvatele autodele) pakuvad sünkroniseerimiseks suuremat väljakutset.

Uus tarkvara suudab näitlejate näoilmeid tegelikult redigeerida