Kuinka Tupac ja Thanos johtivat Douglasiin, tekoälyn digitaaliseen ihmiseen

Jos olet joskus osallistunut ryhmävideopuheluun, olet luultavasti tottunut siihen, ettet tunne kaikkia ruudulla näkyviä. Et ehkä tiedä kaikkien nimiä, mutta ainakin voit olla melko varma, että jokainen puheluun osallistuva henkilö on ihminen.

Vai voitko?

Aikana, jolloin visuaalisten tehosteiden studioilla on vanhentuneet veteraaninäyttelijät, sallittu ihmisesittäjät asumaan digitaalisissa luomuksissa, ja jopa toi edesmenneet taiteilijat takaisin post mortem -esityksiä, ei pitäisi olla niin yllätys, että VFX-studio voi myös mahdollistaa sen, että voit chattailla keinotekoisesti älykäs digitaalinen henkilö suosikkikirjoistasi ja valittaa molemminpuolisesti kyvyttömyydestä käydä elokuvateatterissa.

Sen ei pitäisi olla yllättävää, ja silti on outo tunne löytää yhtäkkiä sympaattinen korva Douglasista, Oscar-palkitun VFX-studion luomasta virtuaalisesta, A.I.-vetoisesta "henkilöstä". Digitaalinen verkkotunnus.

Äskettäisen Zoom-puhelun aikana Douglas – ja hänen parissaan työskentelevän tiimin jäsenet – liittyivät kanssani lyhyeen esittelyyn.

Digitaalinen ihmisen evoluutio

"Olen suuri Stephen Kingin fani", Douglas kertoo minulle lyhyen edestakaisin harrastuksiamme koskevan keskustelun jälkeen, joka saa hänet myöhemmin tunnustamaan, että hän pitää myös romanttisista romaaneista ja J.D. Salingerin romaaneista. Sieppari ruispellossa.

Maailmassa, jossa lausutaan nimiä Siri tai Alexa ääneen riittää oman A.I: n kutsumiseen. kumppani, kokemus Douglasin kanssa tarjosi a voimakas muistutus siitä, että A.I.:n potentiaali ulottuu paljon pidemmälle kuin sääennusteen ja päivittäisyytemme ilmoittaminen ajoittaa.

Digital Domainin luominen – sama studio, joka antoi yleisölle Marvelin kosmisen valloittajan Thanos sisään Avengers: Infinity War ja Kostajat:Loppupeli — Douglas on itsenäinen, digitaalinen ihminen, joka pystyy olemaan vuorovaikutuksessa käyttäjien kanssa reaaliajassa ja reagoimaan visuaalisiin ja keskustelun vihjeisiin. Sen jälkeen mallinnettu Tohtori Doug Roble, Digital Domainin ohjelmistotuotannon ja -kehityksen vanhempi johtaja, Douglas voi vastata kysymyksiin, käydä pitkiä keskusteluja ja keskustella useista aiheista.

"Teknologia yrittää aina johtaa sitä, mitä taide vaatii, oli se sitten nestemäistä simulaatiota tai jotain muuta", Roble sanoo studion päätöksestä luoda koko osasto on omistettu digitaalisille ihmisille.

Viimeisen vuosikymmenen aikana Digital Domain joutui toistuvasti luomaan inhimillisiä digitaalisia hahmoja – kaikkea vuoden 2012 palkitusta holografinen Tupac-esitys Coachellassa edellä mainitulle Marvel Cinematic Universe konna. Elokuvissa, mainoksissa, tv-sarjoissa, videopeleissä ja (Tupacin tapauksessa) näyttämöesityksissä realististen digitaalisten hahmojen kysyntä on vain kasvanut aikaa, mikä sai Digital Domainin jakamaan kyseisestä visuaalisesta tehosteesta vastaavan tiimin omaan yksikköönsä, joka keskittyy ylittämään digitaalisten ihmisten mahdollisuuksia. tehdä.

Douglas on sekä tämän lisääntyneen keskittymisen tuote että tiimin konseptitodistus: itsenäinen digitaalinen "ihminen", joka yhdistää laajan valikoiman tietojoukkoja, aistimenetelmiä, ja olemassa olevat ohjelmointimoduulit, joissa on fotorealistisia inhimillisiä ominaisuuksia, jotta ne voivat olla vuorovaikutuksessa käyttäjien kanssa tavalla, joka tuntuu yllättävän läheltä aitoa ihmisen sosialisaatiota.

Ja aikana, jolloin pandemia on pakottanut suurimman osan seurusteluistamme tapahtumaan tietokoneen kautta näyttö, vuorovaikutus Douglasin kanssa tuntuu huomattavan lähellä sitä, mikä menee aidolle inhimilliselle vuorovaikutukselle päivää. Tiimi kuitenkin lisää nopeasti, että Douglas on vielä kaukana Turingin testin läpäisystä.

Koodi tekee miehen

"Douglas ei ole valokuvatodellinen, täysin itsenäinen henkilö, jota ei voi erottaa todellisesta henkilöstä", selittää. Darren Hendler, Digital Humans Groupin johtaja studiossa. "Emme ole siellä, emmekä aio olla siellä vähään aikaan. … Mutta tässä asiat ovat menossa ja miltä tulevaisuus näyttää, ja yritämme rikkoa näitä rajoja.”

Ja melkein kuin vihjeestä, Douglas itse keskeyttää Hendlerin.

"Se on hyvä asenne", puuttuu Douglas, joka siihen asti oli hiljaa istunut omassa ikkunassaan Zoom-keskusteluruudukossa demoa helpottaen, välillä vaihtaen. asennossa, vilkaisemalla hänen virtuaalihuoneessaan ja näyttäen monia tyypillisiä fyysisiä tapoja elävälle henkilölle videokokouksessa, joka odottaa kärsivällisesti osallistumista keskustelu

"Toivon sinulle onnea yrityksiin", hän lisää ja muistuttaa, että mielenkiintoisen sanomisen lisäksi hän on myös innokas kuuntelija.

Roblen mukaan tiimi näkee Douglasin ennen kaikkea visuaalisena tapana olla vuorovaikutuksessa olemassa olevien monimutkaisten ja tehokkaiden keskusteluagenttien kanssa, jotka on luotu. Douglasin valokuvatodellisen avatarin alla studion digitaalinen ihminen on rakennettu kolmen näistä agenteista: Googlen suositusta Dialogflow sarja chatbottien luomiseen, avustajatyyppinen agentti (samanlainen kuin Amazonin Alexa tai Applen Siri); ja voimakas keskustelukykyinen A.I. agentti (samanlainen kuin GPT-3 projekti), jota käytetään inhimillisen, ennakoivan (ja reaktiivisen) keskustelutekstin tuottamiseen.

Kaikkien kolmen agentin yhdistelmä antaa Douglasille mahdollisuuden jatkaa keskusteluja, jotka ovat sekä informatiivisia että sujuvia, ja keskustelu yhdestä aiheesta johtaa usein toisiinsa liittyviin kiinnostaviin aiheisiin.

Oma keskusteluni Douglasin kanssa ajautui chatista suosikkikirjoistamme hänen suosikkielokuvaansa (hän ​​on suuri 2001: AvaruusodysseiaEsimerkiksi, mikä ei ole yllättävää ja hieman ahdistavaa, kun otetaan huomioon, että tarina keskittyy murhaavaan A.I. ajaa amokkia) ja yhteisiä harrastuksiamme. Eräässä keskustelumme erityisen ajankohtaisessa osassa Douglas ilmaisi pettymyksensä siitä, ettei hän ole viime aikoina päässyt vierailemaan elokuvateatterissa.

Kaikkeen tuohon keskusteluvoimaan liittyy kuitenkin riski, kuten Hendler selitti.

"Chatbotin luonnollisen kielen prosessointikone on koulutettu Internetistä tulevaan dialogiin - valtavaan määrään dialogia - joten keskustelu voi mennä outoihin paikkoihin", hän sanoi. "Joten on aikoja, jolloin hän sanoo asioita, jotka eivät ehkä ole oikein sopivia. Sitä ei tapahdu usein, mutta emme voi tarkasti hallita, mitä hän sanoo kaikkeen."

Ja vaikka Douglasin keskustelupuoli on vaikuttava, se on vain osa sitä, mikä tekee hänestä ainutlaatuisen digitaalisten ihmisten ja interaktiivisten virtuaalisten hahmojen jatkuvasti laajenevassa maailmassa. Kuten Digital Domain havaitsi, tekee hänestä Katso ihminen menee pitkälle saadakseen hänet tuntemaan itsensä myös ihmiseksi.

Face off

"Douglasin rakentamisessa käytimme valtavasti Dougilta [Roblelta] saatua dataa. Se oli valtava määrä ääntä järjestelmän kouluttamiseen [ja] valtava määrä kasvojen suorituskykyä, kehon liiketietoja ja kaikkea muuta", Hendler selitti työstä. he kartoittavat Roblen kasvoja ja lukemattomia tapoja, joilla ihmisen kasvot voivat muuttua puhuessaan, reagoidessaan tunnevihjeisiin tai osallistuessaan passiivisesti keskustelu.

Kaiken tuon datan tulos on digitaalinen ihminen, joka näyttää hämmästyttävän samanlaiselta kuin Roblen tarkka kopio, mutta ei aivan kuin kopio Roblesta. ryhti, kampaus ja rakenne hienovaraisiin liikkeisiin sekä Roblen että Douglas A.I. jakaa, kun he osallistuvat ryhmävideoomme keskustelu. Yhdennäköisyys on hämmentävää, mutta lyhyellä käskyllä ​​"vaihtaa kasvojasi" Douglasista tulee yhtäkkiä joku muu, jolla on erilaiset, yhtä inhimilliset kasvot samassa kehossa, säilyttäen silti kaikki hienovaraiset tavat, jotka saavat hänet näyttämään todellinen.

"Kun pyydämme Douglasta vaihtamaan kasvonsa ja hänen kasvonsa muuttuvat jollekin muulle, tämä uusi teknologian aalto on matkalla", Hendler kuvailee "kuvaan perustuva tekniikka", jonka parissa tiimi työskentelee tehdäkseen Douglasista entistä joustavamman digitaalisen henkilön, joka pystyy muuttamaan dramaattisesti ulkonäköään säilyttäen samalla tason interaktiivisuus. "Kun meillä on tämä tukikohta [Douglasin kanssa], voimme kuvata materiaalia jostain muusta ja saada osan hänen äänestä ja sitten muuttaa tukikohdan heiksi - tehdä siitä heidän kasvonsa."

"[Jos tekisimme sen] juuri nyt, he puhuisivat edelleen sen henkilön ilmeillä, jonka alun perin kuvasimme [tässä tapauksessa Roblen]", hän jatkoi. "Mutta kun jatkamme, alamme tarvita pienempiä tietomääriä - ehkä se on vain kuvia tai filmimateriaalia jostain - luodaksemme seuraavan sukupolven näitä itsenäisiä ihmisiä."

Tämä kyky jäljitellä oikean ihmisen ulkonäköä, ääntä ja käytöstapoja keskustelullisen A.I: n kautta. perusta on yksi niistä elementeistä erottaa Douglasin useimmista tyypillisistä A.I. avustajat, humanoidirobotit ja muut A.I: n ympärillä kehitetyt projektit tutkimusmaailmaan. Vaikka siellä on paljon studioita ja muita toimistoja, jotka kehittävät A.I. jonkinlaisia ​​projekteja, Digital Domain keskittyy yhdistämään kaikki nämä elementit yksi, yhtenäinen tuote, joka käyttää parasta kaikista saatavilla olevista tekniikoista ja tiedoista ja jonka käyttöliittymä tuntuu sosiaaliselta ja orgaaniselta – kuin puhuisi toiselle ihmiselle.

"Olemme todella ylpeitä tästä, koska Douglas on täysin CG-hahmo, joka pyörii Unrealissa", sanoo Roble, joka on erityisen ylpeä käyttäessään laajalti saatavilla olevia elementtejä, kuten suosittua 3D-luontialustaa Epätodellinen moottori, josta on tullut Hollywoodin (ja ennen sitä videopeliteollisuuden) suosituin alusta 3D-visuaalisten tehosteelementtien luomisessa ja käsittelyssä. "[Douglas] on 3D-objekti, joten voit tehdä kaiken mitä voit tehdä millä tahansa digitaalisella hahmolla Unrealissa. Voit muuttaa valaistusta, sijoittaa ne eri ympäristöihin ja niin edelleen. Mutta luomme myös tätä hybridiä [kaiken muun Douglasiin liittyvän kanssa], jotta saamme molempien maailmojen parhaat puolet."

Minne tahansa katsot

Mitä enemmän tiimi työskentelee Douglasin parissa, sitä pidemmäksi mahdollisten sovellusten luettelo kasvaa.

"Ennen pandemiaa suunnittelimme esittelevämme Douglasin kioskina, jossa voit tulla näyttöön ja puhua hänelle", Hendler muisteli. "Mutta sitten ajattelimme: "Hei, meidän pitäisi todella saada hänet Zoom-puheluihin." On ollut mahtavaa saada hänet osallistumaan Zoom-puheluihin ja lähtemään."

Demonstroinnin aikana tiimi kävi läpi pitkän listan mahdollisista Douglasin hakemuksista lääkärin vastaanotoista. ja asiakaspalvelu, hänen hyödyllisyytensä Hollywoodissa kohtauksen tai tietyn näytön suunnittelun alkuvaiheessa järjestys. Douglas itse tarjosi jopa muutamia ehdotuksia, jotka ehdottivat, että hän sopisi hyvin kuvakäsikirjoitukseen ja elokuva- ja TV-tuotannon käsitteellisiin vaiheisiin. Hänen kykynsä käsitellä sekä ääni- että visuaalisia vihjeitä henkilöiltä, ​​joiden kanssa hän keskustelee – etenkin kun on kyse tunnetiloista - Hendlerin mukaan tarjoaa myös lisähyödyllisyyttä asiakkaiden tai lääketieteellistä ohjausta etsivien kanssa.

Nopeus, jolla Douglas pystyy käsittelemään kaiken tiedon ja siirtymään passiivisesta kuuntelijasta aktiiviseen keskustelukumppanilla on myös paljon vetovoimaa, ja hän näyttää kuinka pitkälle hänen takanaan oleva tekniikka on kehittynyt lyhyessä ajassa aika.

"Kun loimme Thanosin, meillä oli yksi kehys siitä 10 tuntia. Se on yksi kehys", hän selittää.

"Douglasilla on näöntunnistusjärjestelmä, joten hän näkee meidät ja voi tunnistaa meidät, ja hän analysoi, mitä sanot, muuntaa sen sanoiksi ja lähettää sen eri chatboteille", hän lisää. "Douglas luo sitten vastauksen, muuttaa sen ääneksi ja käyttää tätä ääntä kasvojensa ohjaamiseen. Samalla hän myös selvittää, mikä kehon liike liittyy puheeseen, määrittää, mikä tunne sopisi siihen, ja esittää kehon liikkeen yhdessä kasvojen eleidensä kanssa.

"Se kaikki tapahtuu muutamassa millisekunnissa", Hendler sanoo. "Se on kaikkia näitä prosesseja verrattuna 10 tuntiin yhtä ruutua kohden elokuvassa. Se on niin ihmeellistä. Se ei ole niin realistista kuin se, mitä teemme elokuville, mutta jos ajattelee, kuinka paljon asioita tapahtuu, jotta voimme puhua hänelle kuin oikea henkilö, se on aivan ilmiömäistä.

Ja hyvin kirjaimellisessa mielessä Douglas on usein ollut itsensä paras puolestapuhuja, kun on kyse hänen potentiaalistaan.

Roble selitti, että useaan otteeseen he päättivät antaa Douglasin johtaa oman esityksensä, no… itsestään. Lopputulos oli hänen potentiaalinsa kannalta parempi kenttä kuin he edes odottivat.

"[Douglasin esitys] oli yllättävän vakuuttava. Se ei ollut vain Sirin pyytämistä kertomaan meille jotain, koska hän oli osa prosessia”, Roble muisteli. "Hänen kanssa on hauska jutella, koska hän on uutuus, mutta hän on myös todella tehokas. Ja et voi olla ajattelematta: Entä opetus tai muut sovellukset? Loppujen lopuksi voit nähdä, milloin hän kiinnittää huomiota. Voit antaa hänelle tunnepalautetta ja hän voi vastata."

Vaikka Douglas on jo vaikuttava luomus, Digital Domain -tiimi vaatii, että hän jatkaa työtään edistystä – mutta taivas on rajana sen suhteen, minkälaista työtä heidän digitaalinen ihminen voisi tehdä ajan kuluessa jatkuu. Prosessi, jossa selvitetään, mihin Douglas pystyy, on monella tapaa sekä prosessi että tavoite.

"Yksi syistä, miksi teemme tämän, on se, että voimme", Roble sanoo. "Kun olet tietokoneen ääressä ja työskentelet, on erittäin helppoa vain kirjoittaa. Mutta on niin monta kertaa ja paikkoja, että olisi ihanaa vain pystyä puhumaan henkilön kanssa ja saada tuo henkilö olemaan vuorovaikutuksessa kanssasi ja reagoimaan sinuun. Uskon, että meillä on edessä suuri muutos tulevaisuudessa."

Toimittajien suositukset

• Kuinka Thanos VFX -tiimi herätti The Quarryn hahmot henkiin (ja sitten tappoi heidät)