Foto-real VR avatarid panevad teid kõike kahtluse alla seadma

Metapixeli kaasasutaja Robbie Cooperil on visioon. "Ma tahan VR-mängu või keskkonda täielikult animeeritud, usutavaid tegelasi, kes reageerivad täiesti loomulikul viisil. Tekib tunne, et tahaks neid puudutada, sest nad on nii tõelised. Selline peaks VR-maailm olema.

Ta ei unista sellest ainult: Tema ja Metapiksel meeskond töötab selle nimel, et see oleks võimalik. Kasutades uskumatut kaameraseadet ja mõnda kohandatud tarkvara, loob Metapixel hämmastavalt elutruud avatare fotorealistlikud funktsioonid, mis põhinevad tegeliku inimese kõrge eraldusvõimega piltidel ja on valmis kasutamiseks mängudes, filmides ja kaugemale. Külastasime Ühendkuningriigis Brightonis asuvat Metapixeli kontorit, et näha tehnoloogiat töös ja lasta luua oma avatari.

Foto-päris avatar

Kaameraseade näeb välja nagu portaal teise dimensiooni; Piisab vaid ühest katiku klõpsust, et teid galaktikates või ajas liigutada. Neid on 102 Nikon D810 kaamerad sellele paigaldatud, kõik varustatud ühe kolmest erinevast objektiivist – 50 mm, 85 mm või 72–300 mm suum.

Loomulikult ei kaasne sellega galaktikat, kuid pärast katiku vabastamist teeb iga kaamera objektist 36-megapikslise RAW-vormingus pildi peaaegu iga mõeldava nurga alt. Need kaadrid edastatakse seejärel Metapixeli arvutisüsteemi, kus neid töödeldakse mõne sekundiga. Umbes järgmise tunni jooksul loob tarkvara ekraanile hämmastava foto-tõelise avatari, mis näeb välja täpselt nagu subjekt. See on tegelikult tehnika, mida nimetatakse fotogrammeetria, kus erinevatest vaatenurkadest tehtud fotod liidetakse kokku, et moodustada ühtne 360-kraadine renderdus, mis sarnaneb 3D keha skaneerimisega.

Ja kui ma ütlen täpselt nagu teema, siis ma mõtlen seda tõsiselt. Tulemus on kummaline. Selle katsetamiseks kutsuti mind platvormi keskele seisma ja oma pilti igaveseks jäädvustama. Tõenäoliselt on see esimene ja ainus kord, kui 102 kaamerat korraga minu suunas suunatakse. Käskis vaadata ühte punkti ja olla täiesti paigal, käed veidi väljas ebamugavalt, ootasin, kuni kaamerad olid valmis – siis pimestas mind fotona välklamp võeti.

Iga pilti kontrollitakse hoolikalt vigade, veidra valgustuse ja varjude suhtes (mis võivad arvutis segadusse ajada ja lõpppildi rikkuda) ning puuduvate piltide suhtes, kus kaamera mingil põhjusel ei tööta. Metapiksli enda tarkvara nimega Capturing Reality teeb kõik rasked ülesanded. See koondab iga foto ja kaardistab pildi võrgule, luues lõpliku avatari. Esimese etapi ülesehitamiseks kulus 10–15 minutit, seejärel tekstuuri ja värvi lisamiseks veel 20 minutit.

Saate lõpuks siin nähtud pildi, nii ehtsa avatari, et see on hirmutav. Seda peetakse ka ainult "normaalseks" kvaliteediks. On ka teisi etappe, mis suurendavad veelgi detailsust. Kogu protsess võttis alla tunni, sealhulgas kogu kaamera seadistamine ja töötlemine.

Võimalused

Mida saab teha oma täiusliku avatariga? Põnevaid võimalusi on palju, kuid Cooperi jaoks on see kõik seotud virtuaalse reaalsusega. "Kombineerige see tõeliselt hea tehisintellektiga ja maailm muutub tõeliseks," ütles ta. Näiteks kui tehisintellekt paraneb, ütles ta mulle, et avatarid saavad VR-mängus aru, kust te "vaatate", ja sellele vastavalt reageerida. Mida realistlikum avatar välja näeb ja käitub, seda rohkem olete toimuvaga seotud.

Ta tõi välja töö animatsioonistuudio 3Lateral, kus näojälgimise tehnoloogiat kasutades peegeldavad tõelised fotoavatarid näitleja näoilmeid ja reaktsioone, mis tõendavad juba töötamist. Et tulla silmitsi sellega, mis on peaaegu elav, hingav inimene VR-mängus või keskkonnas võib see muuta viisi, kuidas me mängusiseste tegelastega suhtleme ja nendega kaasa tunneme.

Filmides on ka põnevat potentsiaali. Sel viisil skaneeritud näitleja muutub sisuliselt surematuks. Kujutage ette näitlejaid, kes jätkavad tööd ka pärast surma või kutsuvad üles aastatetaguse skaneeringu, et stseeni mängida. mida näitleja peab noorem välja nägema – see kõik on võimalik digitaalselt reprodutseeritud, identse välimusega avatari. See läheb sammu võrra kaugemale 3D-animatsioonist ja saab kasutada liikumise jäädvustamisel nähtud tehnikaid.

Kombineerige skannimine 3D-printeriga ja saate ühtäkki ka täiesti täiusliku välimusega märulifiguurid. Tooge tehnoloogia muuseumidesse ja õppekeskkondadesse ning naasete Cooperi nägemuse juurde tegelastest, kellesse usute. Võite kunagi näha ja kuulda, kuidas ajalooline inimene räägib oma elust, tõelised emotsioonid ilmuvad näole, mis näib olevat täiesti inimlik. See on põnev värk ja võimalused tekivad seda rohkem, mida rohkem sellele mõtlete.

Peaaegu reaalsus

Oleme veel veidi eemal, et seda kõike reaalsuses näha. Metapiksel on väga kiiresti jõudnud kaugele; ettevõte ehitas oma esimese kaameraseadme, millel oli sel ajal 30 kaamerat, alles 2015. aasta lõpus. Kuigi see on laienenud, töötatakse kohandatud tarkvara kallal ja peagi on saadaval uuendusi, mis muudavad pildistamise protsessi tõhusamaks. Pealegi on VR ise – Metapixeli võtmetehnoloogia – alles lapsekingades.

Metapiksel tõmbab nii noore ettevõtte jaoks palju tähelepanu ja see töötab filmiproduktsiooniga ettevõte, VR-arendajad ja isegi konverentside korraldajad, et pakkuda kõigile isiklikke kogu keha skaneeringuid USB-mälupulgal osalejad. Kujutage ette, et teil on võimalus seda avatari tulevikus virtuaalreaalsuses peetaval konverentsil kasutada. Tulemused on muljetavaldavad ja põnevad selle tehnoloogia jaoks, mis on tõesti varajases staadiumis. Me ei jõua ära oodata, millal see areneb.

Toimetajate soovitused

• Sellel 8K monitoril on 3D-tehnoloogia, mida saab vaadata iga nurga alt
• VZR-i uued Model One kõrvaklapid toovad mängijateni audiofiilse kvaliteediga 3D-heli
• Doodle'ist saab liitreaalsuse kunst Snapchati uue tööriistaga 3D Paint
• Kas te ei saa seda 150-dollarist statiivipead endale lubada? Lihtsalt 3D-printige Edelkrone Ortak FlexTilt
• Ikea loob mängijatele 3D-prinditud juurdepääsetavuse tarvikuid