Vložené do Samsung Galaxy S9 aplikácia fotoaparátu, AR Emoji umožňuje používať prednú kameru na vytváranie a odosielanie digitálnych kreslených avatarov. Podobne ako u Apple Animojis v koncepte AR Emoji zachytáva pohyby vašej tváre a zrkadlí ich vo forme postavy alebo zvieraťa. S funkciou „Create My Emoji“ si však môžete vytvoriť aj jedného zo seba jednoduchým odfotením selfie – čo vám umožní vybrať si tón pleti, oblečenie, účes, farbu vlasov a okuliare.
S AR Emoji sa Samsung rozhodol vyriešiť to, čo považuje za problém – nájsť spôsob, ako nahradiť existujúce emotikony interaktívnymi. Spoločnosť to chcela urobiť jednoduchým spôsobom a poskytnúť používateľom tie správne nástroje zachytiť emócie, no napriek tomu im umožnilo jednoducho zdieľať výsledok prostredníctvom rôznych správ platformy.
Odporúčané videá
Ako teda Samsung vytvoril svoje AR Emojis? Pre začiatok to išlo priamo k odborníkom na 3D animáciu, ktorí oživili niektoré z najobľúbenejších postáv Hollywoodu.
Súvisiace
- Tu je všetko, čo očakávame od ďalšej akcie Samsung Unpacked
- Galaxy Tab S9 Ultra vyzerá ako jeden z najzaujímavejších tabletov roku 2023
- Tu sa dozviete, aké rýchle je 5G na vašom Samsung Galaxy S23
Od veľkej obrazovky po fotoaparát smartfónu
Na podpore novej funkcie Samsung spolupracoval s Loom.ai — startup so sídlom v San Franciscu, ktorý sa špecializuje na 3D animáciu. Softvér spoločnosti umožňuje používateľom vytvárať plne prispôsobené a prispôsobiteľné 3D avatary z jednej fotografie bez vlastného hardvéru alebo hĺbkových senzorov. Prostredníctvom partnerstva a súpravy na vývoj softvéru (SDK) spoločnosť Samsung skombinovala technológiu Loom.ai s technológiou fotoaparátu S9 (rozšírená realita a rozpoznávanie tváre), aby bolo možné vytvoriť vlastné AR Emoji.
Samsung chce nájsť spôsob, ako nahradiť existujúce emotikony tými, ktoré sú interaktívne.
Vízia za Loom.ai celá začala filmami – karikatúrami a superhrdinami, aby som bol presný. Zakladatelia Loom.ai – Mahesh, predtým pracovali v populárnych spoločnostiach s vizuálnymi efektmi ako DreamWorks a Lucasfilm Ramasubramanian a Kiran Bhat – pomohli dostať známe postavy, ako sú Shrek a Hulk, do veľkej obrazovke.
Na vnesenie osobnosti do týchto postáv použili technológiu zachytávania výkonu na začlenenie hercov, ktorí ich hrali – zaznamenávali pohyby herca, nie ich vizuálny vzhľad. Ale potom, čo videli, ako filmové publikum reagovalo na ich 3D výtvory, Ramasubramanian a Bhat sa rozhodli posunúť túto technológiu ďalej – za hranice Hollywoodu – spustením Loom.ai, ktorý sa zameriava na smartfóny.
„Ľudia okamžite reagujú na to, že tieto postavy ožijú, keď sú poháňané ľudskými hercami,“ povedal pre Digital Trends Ramasubramanian, ktorý pôsobí ako generálny riaditeľ a spoluzakladateľ. "Spustili sme Loom.ai s cieľom, že musíme byť schopní nájsť jednoduchý spôsob, ako sa každý jednotlivec môže vidieť v 3D, a preto sme museli vytvoriť novú technológiu."
Pri celovečerných filmoch si vytvorenie 3D avatara vyžaduje veľa vybavenia – drahý hardvér a softvér, make-up a prostredie štúdia. Loom.ai však našiel spôsob, ako zjednodušiť proces snímania čŕt osoby bez obvyklých nástrojov; namiesto toho jeho patentovaná technológia využíva na analýzu obrazu jednu fotografiu a hlboké učenie. Ak fotografia neobsahuje žiadne výrazy tváre, algoritmus hlbokého učenia sa pozrie na pixely a automaticky vytvorí tvár, ktorá zahŕňa správny pohyb svalov.
„Keď sa partnerstvo Samsungu rozbehlo, mali sme šancu implementovať túto sofistikovanú technológiu do zariadenia, ktoré máme pocit, že je to už samo o sebe dosť presvedčivá inžinierska úloha,“ povedal Bhat, CTO a spoluzakladateľ Loom.ai pre Digital Trendy. "Je to veľký technologický skok v tom, že sme schopní preniesť niektoré z týchto nápadov a túžob z veľkej obrazovky a preniesť ich na mobilné zariadenia."
Na napájanie AR Emoji spoločnosť Samsung požiadala o pomoc Loom.ai — startup so sídlom v San Franciscu, ktorý sa špecializuje na 3D animáciu.
Začlenenie tejto technológie do hardvéru Galaxy S9 si vyžadovalo, aby Loom.ai reštrukturalizoval svoje algoritmy, aby mohol na zariadení fungovať. Loom.ai však nevytvoril AR Emoji sám: Ramasubramanian aj Bhat vďačia spoločnosti Samsung za to, že vynaložil obrovské úsilie na optimalizáciu softvéru. Poskytnutím súpravy SDK na integráciu do smartfónov si zakladatelia Loom.ai myslia, že spoločnosť Samsung môže v budúcnosti urobiť rámec oveľa bohatším pridaním ďalšieho obsahu a možností prispôsobenia.
Ako si Galaxy S9 vytvorí digitálneho avatara
Ako teda presne funguje S9 (a S9 Plus) vytvoriť AR Emojis? Aj keď Samsung neodhalil svoju tajnú omáčku, dal Digital Trends pohľad pod kapotu.
Fotoaparát telefónu využíva technológiu Loom.ai a zachytáva a spracováva 2D obraz do 3D. Na ďalšie zlepšenie používa S9 ďalší softvér – sledovanie tváre a technológiu Blend Shape od spoločnosti Samsung – na poskytovanie výrazov tváre pre AR Emoji.
Potom vám zostane kreslená verzia seba samého, ktorá dokáže vyjadriť 18 rôznych výrazov – ktoré spoločnosť Samsung plánuje pomaly rozšíriť na 54 – od radosti a potešenia až po smútok a hnev. Všetky údaje sú tiež lokálne v zariadení a neukladajú sa nikde inde.
Obidve spolupracujúce technológie sledovania tváre sledujú viac ako 100 tvárových prvkov v reálnom čase (ako je žmurkanie alebo úsmev) a zachytávajú individuálnych emócií, zatiaľ čo Blend Shape pomáha dodať ich väčší rozsah – ktorý spája výrazy na základe 75 základných ľudských rysy tváre. Samsung hovorí, že pre Blend Shape vykonal vo svojich laboratóriách najmenej 100 testov týždenne, aby sa uistil, že existuje dostatok údajov, ktoré by prilákali používateľov. (Blend Shape sa tiež používa na vytvorenie svojich Disney AR Emojis, ako sú Mickey a Minnie Mouse.)
V našom vlastnom Test AR Emoji, väčšina z nás mala pocit, že naše postavy vyzerajú extrémne nepresne. Jeden pisateľ mal pocit, že je k dispozícii nedostatok odtieňov pleti, bez možnosti výberu odtieňov tmavej pleti. Iní mali pocit, že ich AR Emoji sa im vôbec nepodobá, vďaka čomu sa úprava avatara javila skôr ako fuška ako príjemná úloha.
Podľa Loom.ai sa vytvorenie presného AR Emoji do veľkej miery spolieha na spôsob, akým je selfie nasnímaná. Používatelia by mali fotografovať rovnakým spôsobom, ako by robili pasovú fotografiu. „Chcete rovnomerné osvetlenie, nič vám nezakrýva tvár a neutrálny výraz, aby sme výrazy mohli pridať neskôr,“ vysvetlil Ramasubramanian. "Ide o to, aby si ľudia na to trochu zvykli a potom videli možnosti, ako to oživiť a použiť."
Ramasubramanian tiež povedal, že používatelia by sa k tomu mali správať tak, ako by sa správali pri robení akejkoľvek selfie – čo znamená, že môžete robiť veľa fotografií, kým nebudete s fotografiou spokojní. Keďže AR Emoji vám umožňuje vytvoriť viacero avatarov, môžete ich porovnať a nájsť toho, ktorý sa vám najviac páči. Každá z nich, ktorú vytvoríte, sa uloží aj do telefónu, takže verziu, ktorú používate, môžete zmeniť podľa nálady.
Najnovšia aktualizácia AR Emoji obsahuje ďalšie účesy, pokrývky hlavy, ako je hidžáb, a ďalšie možnosti. Aktualizácia sa momentálne rozširuje na odomknuté verzie Samsung Galaxy S9 a S9 Plus v Kórei, Číne a Európe. Zariadenia európskeho operátora a odomknuté zariadenia v USA by mali mať aktualizáciu k dispozícii na stiahnutie tento týždeň. Aktualizácia pre zariadenia operátorov v USA bude spustená v priebehu nasledujúcich týždňov. Spoločnosť Samsung tvrdí, že AR Emoji sa bude v budúcnosti naďalej vyvíjať, ale zatiaľ sa drží presných detailov.
Odporúčania redaktorov
- Samsung nám práve dal 3 veľké ukážky Galaxy Unpacked
- Najnovší telefón Asus s Androidom by mohol byť veľkou hrozbou pre Galaxy S23 Ultra
- Tu je náš úplne prvý pohľad na Samsung Galaxy Tab S9 Plus
- Samsung možno práve zabil Galaxy S10
- Samsung Galaxy Tab S9 môže získať funkciu, ktorú iPad nikdy nemal
