Iegults iekšā Samsung Galaxy S9 kameras lietotne, AR emocijzīmes ļauj izmantot priekšējo kameru, lai izveidotu un nosūtītu digitālo multfilmu iemiesojumus. Līdzīgi kā Apple Animojis koncepcijā AR Emoji fiksē jūsu sejas kustības un atspoguļo tās varoņa vai dzīvnieka formā. Taču, izmantojot funkciju “Izveidot manas emocijzīmes”, varat arī izveidot kādu no sevis, vienkārši uzņemot pašbildi — ļaujot izvēlēties ādas toni, apģērbu, frizūru, matu krāsu un brilles.
Izmantojot AR Emoji, Samsung nolēma atrisināt to, ko uzskata par problēmu, — atrast veidu, kā aizstāt esošās emocijzīmes ar interaktīvām. Uzņēmums vēlējās to izdarīt vienkāršā veidā, nodrošinot lietotājiem pareizos rīkus tvert emocijas, bet tomēr ļāva viņiem viegli kopīgot rezultātu, izmantojot dažādus ziņojumus platformas.
Ieteiktie videoklipi
Tātad, kā Samsung izveidoja savas AR emocijzīmes? Iesācēji tas tika nodots 3D animācijas ekspertiem, kuri atdzīvināja dažus no Holivudas populārākajiem varoņiem.
Saistīts
- Šeit ir viss, ko mēs sagaidām no Samsung nākamā Unpacked pasākuma
- Galaxy Tab S9 Ultra izskatās kā viens no 2023. gada aizraujošākajiem planšetdatoriem
- Lūk, cik ātrs patiesībā ir 5G jūsu Samsung Galaxy S23
No lielā ekrāna līdz viedtālruņa kamerai
Lai nodrošinātu jauno funkciju, Samsung sadarbojās ar Loom.ai — Sanfrancisko jaunuzņēmums, kas specializējas 3D animācijā. Uzņēmuma programmatūra ļauj lietotājiem izveidot pilnībā personalizētus un pielāgojamus 3D iemiesojumus no vienas fotogrāfijas bez pielāgotas aparatūras vai dziļuma sensoriem. Izmantojot partnerību un programmatūras izstrādes komplektu (SDK), Samsung apvienoja Loom.ai tehnoloģiju ar S9 kameras tehnoloģiju (papildināto realitāti un sejas atpazīšanu), lai padarītu iespējamu pielāgotu AR Emoji.
Samsung vēlas atrast veidu, kā aizstāt esošās emocijzīmes ar tām, kas ir interaktīvas.
Loom.ai vīzija sākās ar filmām — precīzāk sakot, multfilmām un supervaroņiem. Iepriekš strādājuši populāros vizuālo efektu uzņēmumos, piemēram, DreamWorks un Lucasfilm, Loom.ai dibinātāji – Mahesh Ramasubramans un Kirans Bhats — ir palīdzējuši celt sabiedrībā plaši pazīstamus varoņus, piemēram, Šreku un Halku. ekrāns.
Lai šiem varoņiem piešķirtu personību, viņi izmantoja priekšnesumu tveršanas tehnoloģiju, lai iekļautu aktierus, kuri tos spēlējuši, — ierakstot aktiera kustības, nevis viņu vizuālo izskatu. Taču, redzot, kā filmu skatītāji reaģē uz viņu 3D darbiem, Ramasubramans un Bhats nolēma lai attīstītu šo tehnoloģiju tālāk — ārpus Holivudas — izveidojot Loom.ai, kas koncentrējas uz viedtālruņi.
“Cilvēki acumirklī reaģē uz šo varoņu atdzīvošanos, ja to virza cilvēku aktieri,” izdevumam Digital Trends stāstīja Ramasubramanians, kurš ir izpilddirektors un līdzdibinātājs. "Mēs izveidojām Loom.ai ar mērķi, lai mēs varētu atrast vienkāršu veidu, kā katrs indivīds varētu redzēt sevi 3D, un tāpēc mums bija jāizveido jauna tehnoloģija."
Ar spēlfilmām, lai izveidotu 3D iemiesojumu, ir nepieciešams daudz aprīkojuma — dārga aparatūra un programmatūra, grims un studijas iestatījums. Taču Loom.ai atrada veidu, kā vienkāršot cilvēka iezīmju tveršanas procesu bez parastajiem rīkiem; tā vietā tā patentētā tehnoloģija attēla analizēšanai izmanto vienu fotogrāfiju un dziļu mācīšanos. Ja fotoattēlā nav nevienas sejas izteiksmes, dziļās mācīšanās algoritms aplūko pikseļus un automātiski izveido seju, kas iekapsulē pareizo muskuļu kustību.
“Kad Samsung partnerība attīstījās, mums bija iespēja ieviest šo sarežģīto tehnoloģiju ierīcē, kas mēs uzskatām, ka tas jau pats par sevi ir diezgan pārliecinošs inženierijas uzdevums, ”Bhat, Loom.ai CTO un līdzdibinātājs, pastāstīja Digital. Tendences. "Tas ir liels tehnoloģiju lēciens, kas spēj pārņemt dažas no šīm idejām un centieniem no lielā ekrāna un nodot to mobilajām ierīcēm."
Lai darbinātu AR Emoji, Samsung izmantoja palīdzību Loom.ai — Sanfrancisko jaunuzņēmums, kas specializējas 3D animācijā.
Šīs tehnoloģijas iekļaušanai Galaxy S9 aparatūrā bija nepieciešams Loom.ai pārstrukturēt savus algoritmus, lai tas darbotos ierīcē. Taču Loom.ai neizveidoja tikai AR Emoji — gan Ramasubramanian, gan Bhat atzinīgi novērtēja Samsung, veltot milzīgas pūles programmatūras optimizēšanai. Nodrošinot SDK integrēšanai viedtālruņos, Loom.ai dibinātāji domā, ka Samsung var padarīt sistēmu daudz bagātāku, nākotnē pievienojot vairāk satura un pielāgošanas iespēju.
Kā Galaxy S9 izveido digitālo iemiesojumu
Tātad, kā tieši darbojas S9 (un S9 Plus) vai izveidot AR emocijzīmes? Lai gan Samsung neatklāja savu slepeno mērci, tas ieskatījās Digital Trends zem pārsega.
Izmantojot Loom.ai tehnoloģiju, tālruņa kamera tver un apstrādā 2D attēlu 3D formātā. Lai to vēl vairāk uzlabotu, S9 izmanto papildu programmatūru — sejas izsekošanu un Samsung Blend Shape tehnoloģiju —, lai nodrošinātu sejas izteiksmes AR Emoji.
Pēc tam jums tiek atstāta karikatūrai līdzīga sevis versija, kas spēj izjust 18 dažādas izteiksmes — Samsung plāno tās lēnām paplašināt līdz 54 — sākot no prieka un baudas līdz bēdām un dusmām. Visi dati ir arī lokāli ierīcē, un tie netiek saglabāti nekur citur.
Abi strādā kopā, sejas izsekošanas tehnoloģija reāllaikā izseko vairāk nekā 100 sejas vaibstus (piemēram, aci vai smaidīšanu), lai iemūžinātu. individuālas emocijas, savukārt Blend Shape palīdz nodrošināt lielāku to klāstu, kas apvieno izteiksmes, pamatojoties uz 75 cilvēka pamatelementiem. sejas vaibsti. Samsung saka, ka Blend Shape savās laboratorijās katru nedēļu veica vismaz 100 testus, lai pārliecinātos, ka ir pietiekami daudz datu, kas vilinātu tā lietotājus. (Blend Shape tiek izmantots arī, lai izveidotu Disney AR emocijzīmes, piemēram, Mikiju un Minnijas peli.)
Mūsu pašu AR emocijzīmju pārbaude, lielākā daļa no mums uzskatīja, ka mūsu varoņi izskatās ārkārtīgi neprecīzi. Kāds rakstnieks uzskatīja, ka trūkst pieejamo ādas toņu iespēju, un nebija tumšādaino toņu, no kuriem izvēlēties. Citi uzskatīja, ka viņu AR emocijzīmes nelīdzinājās tām, tāpēc iemiesojuma rediģēšana šķita vairāk grūts, nevis patīkams uzdevums.
Saskaņā ar Loom.ai, precīzas AR emocijzīmes izveide lielā mērā ir atkarīga no pašbildes uzņemšanas veida. Lietotājiem vajadzētu fotografēt tāpat kā pases fotoattēlu. "Jūs vēlaties vienmērīgu apgaismojumu, lai nekas neaizsedz jūsu seju, un neitrālu izteiksmi, lai mēs varētu pievienot izteiksmes vēlāk," skaidroja Ramasubramanians. "Tas ir jautājums par to, lai cilvēki pie tā mazliet pierod un pēc tam redzētu iespējas to animēt un izmantot."
Ramasubramanian arī teica, ka lietotājiem pret to jāizturas tā, kā viņi to darītu, uzņemot pašbildes — tas nozīmē, ka varat uzņemt daudz fotoattēlu, līdz esat apmierināts ar fotoattēlu. Tā kā AR Emoji ļauj izveidot vairākus iemiesojumus, varat tos salīdzināt, lai atrastu sev tīkamāko. Katrs no jūsu izveidotajiem failiem tiek saglabāts arī jūsu tālrunī, lai jūs varētu mainīt izmantoto versiju atkarībā no jūsu noskaņojuma.
Jaunākajā AR Emoji atjauninājumā ir iekļautas papildu frizūras, galvassegas, piemēram, hidžabs, un citas iespējas. Atjauninājums pašlaik tiek ieviests atbloķētajām versijām Samsung Galaxy S9 un S9 Plus Korejā, Ķīnā un Eiropā. Eiropas mobilo sakaru operatoru ierīcēm un ASV atbloķētajām ierīcēm atjauninājums būs pieejams lejupielādei šonedēļ. ASV mobilo sakaru operatoru ierīču atjauninājums tiks ieviests tuvāko nedēļu laikā. Samsung saka, ka AR Emoji turpinās attīstīties arī turpmāk, taču pagaidām precīzas detaļas ir stingras.
Redaktoru ieteikumi
- Samsung tikko mums uzdāvināja 3 lielus Galaxy Unpacked reklāmas
- Asus jaunākais Android tālrunis varētu būt liels drauds Galaxy S23 Ultra
- Šis ir mūsu pirmais skats uz Samsung Galaxy Tab S9 Plus
- Samsung, iespējams, tikko nogalināja Galaxy S10
- Samsung Galaxy Tab S9 var iegūt funkciju, kas iPad nekad nav bijusi
