Incorporato nel Samsung Galaxy S9 applicazione della fotocamera, Emoji AR ti consente di utilizzare la fotocamera frontale per creare e inviare avatar di cartoni animati digitali. Simile a quello di Apple Animoji concettualmente, AR Emoji cattura i tuoi movimenti facciali e li rispecchia sotto forma di un personaggio o di un animale. Ma con la funzione "Crea la mia Emoji", puoi anche crearne una tua semplicemente scattando un selfie, permettendoti di scegliere la tonalità della pelle, il vestito, l'acconciatura, il colore dei capelli e gli occhiali.
Con AR Emoji, Samsung ha deciso di risolvere quello che considera un problema: trovare un modo per sostituire gli emoji esistenti con altri interattivi. L'azienda voleva farlo in modo semplice, fornendo agli utenti gli strumenti giusti per farlo catturare le emozioni ma ha comunque permesso loro di condividere facilmente il risultato su una varietà di messaggi piattaforme.
Video consigliati
Allora, come ha fatto Samsung a creare i suoi Emoji AR? Per cominciare, si è rivolto direttamente agli esperti di animazione 3D che hanno dato vita ad alcuni dei personaggi più famosi di Hollywood.
Imparentato
- Ecco tutto ciò che ci aspettiamo dal prossimo evento Unpacked di Samsung
- Il Galaxy Tab S9 Ultra sembra uno dei tablet più entusiasmanti del 2023
- Ecco quanto è davvero veloce il 5G sul tuo Samsung Galaxy S23
Dal grande schermo alla fotocamera dello smartphone
Per potenziare la nuova funzionalità, Samsung ha collaborato con Loom.ai - una startup con sede a San Francisco specializzata in animazione 3D. Il software dell'azienda consente agli utenti di creare avatar 3D completamente personalizzati e personalizzabili da una singola fotografia, senza hardware personalizzato o sensori di profondità. Attraverso una partnership e un kit di sviluppo software (SDK), Samsung ha combinato la tecnologia di Loom.ai con la tecnologia della fotocamera dell'S9 (realtà aumentata e riconoscimento facciale) per rendere possibile AR Emoji personalizzati.
Samsung vuole trovare un modo per sostituire gli emoji esistenti con altri interattivi.
La visione dietro Loom.ai è iniziata con i film: cartoni animati e supereroi per l'esattezza. Avendo precedentemente lavorato presso famose società di effetti visivi come DreamWorks e Lucasfilm, i fondatori di Loom.ai, Mahesh Ramasubramanian e Kiran Bhat - hanno contribuito a portare personaggi famosi, come Shrek e Hulk, sul grande schermo schermo.
Per conferire personalità a questi personaggi, hanno utilizzato la tecnologia di performance capture per incorporare gli attori che li interpretavano, registrando i movimenti degli attori, non il loro aspetto visivo. Ma dopo aver visto come il pubblico cinematografico ha reagito alle loro creazioni 3D, Ramasubramanian e Bhat hanno deciso per portare quella tecnologia oltre – oltre Hollywood – avviando Loom.ai, su cui si concentra smartphone.
"Le persone reagiscono immediatamente quando questi personaggi prendono vita quando sono guidati da attori umani", ha detto a Digital Trends Ramasubramanian, che ricopre il ruolo di CEO e co-fondatore. "Abbiamo avviato Loom.ai con l'obiettivo di trovare un modo semplice in cui ogni individuo possa vedersi in 3D e per questo abbiamo dovuto costruire una nuova tecnologia."
Con i lungometraggi, la creazione di un avatar 3D richiede tonnellate di attrezzature: hardware e software costosi, trucco e un'ambientazione da studio. Ma Loom.ai ha trovato un modo per semplificare il processo di acquisizione delle caratteristiche di una persona senza i soliti strumenti; invece, la sua tecnologia brevettata utilizza una singola fotografia e il deep learning per analizzare un’immagine. Se una fotografia è priva di espressioni facciali, l’algoritmo di deep learning esamina i pixel e produce automaticamente un volto che incapsula il corretto movimento muscolare.
“Quando si è concretizzata la partnership con Samsung, abbiamo avuto la possibilità di implementare quella sofisticata tecnologia su un dispositivo che riteniamo che sia già di per sé un compito ingegneristico piuttosto avvincente", ha dichiarato a Digital Bhat, CTO e co-fondatore di Loom.ai Tendenze. “Poter prendere alcune di quelle idee e aspirazioni dal grande schermo e portarle sui dispositivi mobili rappresenta un grande salto tecnologico”.
Per alimentare AR Emoji, Samsung si è avvalsa dell'aiuto di Loom.ai - una startup con sede a San Francisco specializzata in animazione 3D.
L'incorporazione di questa tecnologia nell'hardware del Galaxy S9 ha richiesto a Loom.ai di ristrutturare i suoi algoritmi per poter funzionare sul dispositivo. Ma Loom.ai non ha creato AR Emoji da solo: sia Ramasubramanian che Bhat attribuiscono a Samsung il merito di aver dedicato enormi sforzi all'ottimizzazione del software. Fornendo l'SDK da integrare negli smartphone, i fondatori di Loom.ai pensano che Samsung possa rendere il framework molto più ricco aggiungendo in futuro più contenuti e opzioni di personalizzazione.
Come il Galaxy S9 crea un avatar digitale
Quindi, come funziona esattamente l'S9 (e S9 Plus) creare emoji AR? Anche se Samsung non ha rivelato il suo segreto, ha dato uno sguardo a Digital Trends sotto il cofano.
Utilizzando la tecnologia di Loom.ai, la fotocamera del telefono cattura ed elabora un'immagine 2D in 3D. Per migliorare ulteriormente questo aspetto, l’S9 utilizza un software aggiuntivo – il tracciamento facciale e la tecnologia Blend Shape di Samsung – per fornire espressioni facciali per AR Emoji.
Ti rimane quindi una versione di te stesso in stile cartone animato che può esprimere 18 espressioni diverse – che Samsung prevede di espandere lentamente fino a 54 – che vanno dalla gioia e al piacere, al dolore e alla rabbia. Tutti i dati sono anche locali nel dispositivo e non vengono archiviati altrove.
Lavorando insieme, la tecnologia di tracciamento facciale traccia oltre 100 caratteristiche facciali in tempo reale (come ammiccare o sorridere) per catturarle emozioni individuali, mentre Blend Shape aiuta a fornirne una gamma più ampia, fondendo insieme le espressioni sulla base di 75 concetti umani di base. caratteristiche facciali. Samsung afferma che per Blend Shape ha condotto almeno 100 test su base settimanale nei suoi laboratori, per assicurarsi che ci siano dati sufficienti per attirare i suoi utenti. (Blend Shape viene utilizzato anche per creare i suoi Disney AR Emoji, come Topolino e Minnie Mouse.)
Nel nostro Prova delle emoji AR, la maggior parte di noi ha ritenuto che i nostri personaggi fossero estremamente imprecisi. Uno scrittore ha ritenuto che mancassero opzioni per il tono della pelle disponibili, senza toni della pelle scura tra cui scegliere. Altri ritenevano che i loro Emoji AR non somigliassero per niente a loro, il che faceva sembrare la modifica dell'avatar più un compito ingrato che un compito divertente.
Secondo Loom.ai, la creazione di un Emoji AR accurato dipende in gran parte dal modo in cui viene scattato il selfie. Gli utenti dovrebbero scattare la foto nello stesso modo in cui scatterebbero una foto tessera. "Vuoi un'illuminazione uniforme, niente che copra il tuo viso e un'espressione neutra in modo da poter aggiungere le espressioni in seguito", ha spiegato Ramasubramanian. "È solo questione di persone che si abituano un po' ad esso e poi vedono le possibilità di animarlo e usarlo."
Ramasubramanian ha anche detto che gli utenti dovrebbero trattarlo come farebbero mentre scattano qualsiasi selfie, il che significa che puoi scattare tonnellate di foto finché non sei soddisfatto della foto. Poiché AR Emoji ti consente di creare più avatar, puoi confrontarli per trovare quello che ti piace di più. Ognuno di quelli che crei viene salvato anche sul tuo telefono, quindi puoi cambiare la versione che usi a seconda del tuo umore.
L'ultimo aggiornamento di AR Emoji include acconciature aggiuntive, copricapi come l'hijab e altre opzioni. L'aggiornamento è attualmente in fase di distribuzione alle versioni sbloccate di Samsung Galaxy S9 e S9 Plus in Corea, Cina ed Europa. I dispositivi degli operatori europei e i dispositivi sbloccati negli Stati Uniti dovrebbero avere l'aggiornamento disponibile per il download questa settimana. L'aggiornamento per i dispositivi degli operatori statunitensi verrà implementato nelle prossime settimane. Samsung afferma che AR Emoji continuerà ad evolversi in futuro, ma per ora rimane a bocca aperta sui dettagli esatti.
Raccomandazioni degli editori
- Samsung ci ha appena regalato 3 grandi teaser del Galaxy Unpacked
- L’ultimo telefono Android di Asus potrebbe rappresentare una grande minaccia per il Galaxy S23 Ultra
- Ecco il nostro primo sguardo al Samsung Galaxy Tab S9 Plus
- Samsung potrebbe aver appena ucciso il Galaxy S10
- Il Galaxy Tab S9 di Samsung potrebbe avere una funzionalità che l'iPad non ha mai avuto
