Įterptas į Samsung Galaxy S9 fotoaparato programa, AR jaustukai leidžia naudoti priekinę kamerą skaitmeninių animacinių filmukų avatarams kurti ir siųsti. Panašus į Apple Animojis Koncepcijoje AR Emoji fiksuoja jūsų veido judesius ir atspindi juos veikėjo ar gyvūno pavidalu. Tačiau naudodamiesi funkcija „Sukurti mano jaustuką“ galite susikurti vieną iš savęs tiesiog nufotografuodami asmenukę – tai leidžia pasirinkti odos atspalvį, aprangą, šukuoseną, plaukų spalvą ir akinius.
Naudodama AR Emoji, „Samsung“ nusprendė išspręsti problemą, kuri, jos manymu, yra problema – rasti būdą, kaip esamus jaustukus pakeisti interaktyviais. Bendrovė norėjo tai padaryti paprastu būdu, suteikdama vartotojams tinkamus įrankius užfiksuoti emocijas, bet vis tiek leido jiems lengvai dalytis rezultatu įvairiuose pranešimuose platformos.
Rekomenduojami vaizdo įrašai
Taigi, kaip „Samsung“ sukūrė savo AR jaustukus? Pradedantiesiems, jis atiteko 3D animacijos ekspertams, kurie atgaivino kai kuriuos populiariausius Holivudo personažus.
Susijęs
- Štai viskas, ko tikimės iš kito Samsung Unpacked renginio
- „Galaxy Tab S9 Ultra“ atrodo kaip vienas įdomiausių 2023 m. planšetinių kompiuterių
- Štai koks iš tikrųjų yra 5G greitis jūsų „Samsung Galaxy S23“.
Nuo didelio ekrano iki išmaniojo telefono kameros
Siekdama paleisti naująją funkciją, „Samsung“ bendradarbiavo su Loom.ai - San Franciske įsikūręs startuolis, kurio specializacija yra 3D animacija. Bendrovės programinė įranga leidžia vartotojams sukurti visiškai individualizuotus ir pritaikomus 3D pseudoportretus iš vienos nuotraukos be specialios aparatinės įrangos ar gylio jutiklių. Bendradarbiaudama ir programinės įrangos kūrimo rinkiniu (SDK), „Samsung“ sujungė Loom.ai technologiją su S9 fotoaparato technologija (papildyta realybe ir veido atpažinimu), kad būtų galima pritaikyti AR jaustukus.
„Samsung“ nori rasti būdą, kaip esamus jaustukus pakeisti interaktyviais.
Visa Loom.ai vizija prasidėjo nuo filmų – tiksliau animacinių filmų ir superherojų. Anksčiau dirbę tokiose populiariose vizualinių efektų kompanijose kaip DreamWorks ir Lucasfilm, Loom.ai įkūrėjai – Mahesh Ramasubramanianas ir Kiranas Bhatas padėjo atnešti gerai žinomus personažus, tokius kaip Šrekas ir Hulkas. ekranas.
Kad įneštų į tuos personažus asmenybę, jie naudojo atlikimo fiksavimo technologiją, kad įtrauktų juos vaidinusius aktorius – įrašydavo aktoriaus judesius, o ne jų išvaizdą. Tačiau pamatę, kaip filmų žiūrovai reagavo į jų 3D kūrinius, Ramasubramanianas ir Bhatas nusprendė paleisti šią technologiją toliau – už Holivudo ribų – paleidus Loom.ai, kuriame pagrindinis dėmesys skiriamas išmanieji telefonai.
„Žmonės akimirksniu reaguoja į tai, kad šie personažai atgyja, kai juos skatina žmonės“, – „Digital Trends“ sakė Ramasubramanianas, einantis generalinio direktoriaus ir įkūrėjų pareigas. „Sukūrėme Loom.ai siekdami, kad kiekvienas asmuo galėtų lengvai pamatyti save 3D formatu, ir tam turėjome sukurti naują technologiją.
Kuriant vaidybinius filmus, norint sukurti 3D pseudoportretą, reikia daugybės įrangos – brangios techninės ir programinės įrangos, makiažo ir studijos aplinkos. Tačiau Loom.ai rado būdą, kaip supaprastinti žmogaus savybių fiksavimo procesą be įprastų įrankių; Vietoj to, jo patentuota technologija vaizdui analizuoti naudoja vieną nuotrauką ir gilų mokymąsi. Jei nuotraukoje nėra jokių veido išraiškų, giluminio mokymosi algoritmas žiūri į pikselius ir automatiškai sukuria veidą, kuris apima teisingą raumenų judesį.
„Kai „Samsung“ partnerystė užsimezgė, turėjome galimybę įdiegti šią sudėtingą technologiją įrenginyje, kuris manome, kad tai jau savaime yra gana patraukli inžinerinė užduotis“, – „Digital“ sakė Bhatas, Loom.ai CTO ir vienas iš įkūrėjų. Tendencijos. „Tai didelis technologijų šuolis, nes kai kurias idėjas ir siekius galima perimti iš didelio ekrano ir pritaikyti mobiliesiems.
Siekdama paleisti AR Emoji, „Samsung“ pasitelkė pagalbą Loom.ai - San Franciske įsikūręs startuolis, kurio specializacija yra 3D animacija.
Įtraukus šią technologiją į „Galaxy S9“ aparatinę įrangą, „Loom.ai“ turėjo pertvarkyti savo algoritmus, kad veiktų įrenginyje. Tačiau Loom.ai sukūrė ne tik AR Emoji: tiek Ramasubramanian, tiek Bhat įvertino „Samsung“ skiriant milžiniškas pastangas optimizuojant programinę įrangą. Pateikdami SDK integravimui į išmaniuosius telefonus, „Loom.ai“ įkūrėjai mano, kad „Samsung“ gali padaryti sistemą daug turtingesnę, ateityje pridėdama daugiau turinio ir tinkinimo parinkčių.
Kaip „Galaxy S9“ sukuria skaitmeninį avatarą
Taigi, kaip tiksliai veikia S9 (ir S9 Plus) sukurti AR jaustukus? Nors „Samsung“ neatskleidė savo slapto padažo, „Digital Trends“ pažvelgė po gaubtu.
Naudojant Loom.ai technologiją, telefono kamera fiksuoja ir apdoroja 2D vaizdą į 3D. Kad tai dar labiau sustiprintų, S9 naudoja papildomą programinę įrangą – veido stebėjimą ir „Samsung“ „Blend Shape“ technologiją – veido išraiškoms AR emocijoms suteikti.
Tada jums lieka animacinio filmo tipo jūsų versija, kuri gali jausti 18 skirtingų išraiškų – kurias „Samsung“ planuoja pamažu išplėsti iki 54 – nuo džiaugsmo ir malonumo iki liūdesio ir pykčio. Visi duomenys taip pat yra vietiniai įrenginyje ir niekur kitur nesaugomi.
Abu veikia kartu, veido stebėjimo technologija realiuoju laiku stebi daugiau nei 100 veido bruožų (pvz., mirksėjimo ar šypsenos), kad užfiksuotų. individualias emocijas, o „Blend Shape“ padeda pateikti didesnį jų spektrą – tai sujungia išraiškas pagal 75 pagrindinius žmogaus veido bruožai. „Samsung“ teigia, kad „Blend Shape“ kas savaitę savo laboratorijose atliko mažiausiai 100 bandymų, kad įsitikintų, jog yra pakankamai duomenų, kurie priviliotų jos vartotojus. (Blend Shape taip pat naudojama kuriant „Disney AR“ jaustukus, tokius kaip Mikis ir Minnie Mouse.)
Mūsų pačių AR jaustukų testas, daugumai mūsų atrodė, kad mūsų personažai atrodė labai netikslūs. Vienas rašytojas manė, kad trūksta galimų odos atspalvių variantų, nes nebuvo galima rinktis iš tamsios odos atspalvių. Kiti jautė, kad jų AR jaustukai nepanašūs į juos, todėl pseudoportreto redagavimas atrodė labiau vargas nei maloni užduotis.
Anot Loom.ai, tikslios AR emocijos kūrimas labai priklauso nuo asmenukės fotografavimo būdo. Naudotojai turėtų fotografuoti taip pat, kaip darytų paso nuotrauką. „Norite tolygaus apšvietimo, nieko neuždengti veido ir neutralios išraiškos, kad vėliau galėtume pridėti išraiškų“, – paaiškino Ramasubramanianas. „Reikia, kad žmonės šiek tiek prie to priprastų, o paskui pamatytų galimybes jį pagyvinti ir panaudoti.
Ramasubramanianas taip pat teigė, kad vartotojai turėtų elgtis su ja taip, kaip darytų bet kokią asmenukę – tai reiškia, kad galite daryti daugybę nuotraukų, kol būsite patenkinti nuotrauka. Kadangi AR jaustukai leidžia sukurti kelis avatarus, galite juos palyginti, kad rastumėte labiausiai patinkantį. Kiekvienas iš jų taip pat išsaugomas jūsų telefone, todėl galite pakeisti naudojamą versiją, atsižvelgdami į nuotaiką.
Naujausiame „AR Emoji“ atnaujinime yra papildomų šukuosenų, galvos apdangalų, pvz., hidžabo, ir kitų parinkčių. Atnaujinimas šiuo metu išleidžiamas atrakintose versijose Samsung Galaxy S9 ir S9 Plus Korėjoje, Kinijoje ir Europoje. Europos operatorių įrenginiai ir JAV atrakinti įrenginiai turėtų turėti naujinimą, kurį bus galima atsisiųsti šią savaitę. JAV operatoriaus įrenginių atnaujinimas bus pristatytas per ateinančias savaites. „Samsung“ teigia, kad „AR Emoji“ ir toliau vystysis ateityje, tačiau kol kas griežtai kalba apie tikslias detales.
Redaktorių rekomendacijos
- „Samsung“ ką tik mums padovanojo 3 didelius „Galaxy Unpacked“ anonsus
- Naujausias „Asus“ „Android“ telefonas gali kelti didelę grėsmę „Galaxy S23 Ultra“.
- Štai pirmasis mūsų žvilgsnis į „Samsung Galaxy Tab S9 Plus“.
- Galbūt „Samsung“ ką tik nužudė „Galaxy S10“.
- „Samsung Galaxy Tab S9“ gali turėti funkciją, kurios „iPad“ niekada neturėjo
