ModiFace collabora con Samsung per portare il trucco AR sul Galaxy S9

Brenda Stolyar/Tendenze digitali

Dai un'occhiata alla nostra copertura completa del MWC 2023

Quello di Samsung Galaxy S9 e S9 Plus vieni con una varietà di nuove funzionalità della fotocamera Compreso Emoji AR, Super rallentatore, e a apertura variabile. Ma c’è un altro nuovo trucco che non abbiamo mai visto prima integrato in uno smartphone: lo strumento di trucco in realtà aumentata in Bixby Vision.

Integrato nell'app fotocamera dell'S9, Makeup ti consente di applicare diversi prodotti sul tuo viso con la realtà aumentata. Punta la fotocamera selfie verso il tuo viso e gli stili di trucco che scegli verranno sovrapposti al tuo viso, esattamente come i filtri Snapchat. Il vantaggio è che puoi provare il trucco nel comfort di casa tua, evitando anche la necessità di pulirti dopo. È la prima volta che vediamo questo tipo di funzionalità integrata in un file smartphone, ma la tecnologia è tutt’altro che nuova. Samsung ha sfruttato ModiFace, un'azienda con oltre un decennio di ricerca in questo campo, per integrare la sua tecnologia AR di bellezza nella fotocamera.

Dalla cura della pelle al trucco in realtà aumentata

Se hai mai usato il Applicazione Sephora provare virtualmente il trucco, o Prova delle sopracciglia di Benefit app per testare una nuova forma di sopracciglia, quindi hai utilizzato la tecnologia AR di ModiFace. L'azienda ora alimenta più di 200 clienti personalizzati app di realtà aumentata per marchi di bellezza di fascia alta, ma inizialmente tutto è iniziato con la cura della pelle.

Smartphone la popolarità ha ispirato ModiFace a testare la sua tecnologia con la realtà aumentata.

Prima di smartphone rivoluzione, ModiFace ha collaborato con dermatologi e alcuni marchi per aiutare le persone a trovare soluzioni ai problemi di cura della pelle.

Le persone potevano caricare una loro foto su un'app Web e l'azienda la elaborava per individuare le aree problematiche e suggerire miglioramenti alle routine di cura della pelle.

ModiFace originariamente utilizzava immagini 2D con l'app Web, ma con il progresso della tecnologia l'azienda è stata presto in grado di consentire agli utenti di caricare video. Quando gli smartphone sono diventati popolari, ModiFace ha iniziato a testare la sua tecnologia con la realtà aumentata e ha aggiunto trucco e capelli al suo elenco di funzionalità supportate.

"Con il smartphone boom, è stata l'occasione perfetta per espanderci perché ci ha permesso di portare l'AR direttamente nel nostro gli utenti nel palmo della [loro] mano", ha dichiarato a Digital Jeff Houghton, vicepresidente della tecnologia di ModiFace Tendenze.

I suoi attuali kit di sviluppo software (SDK) sono il culmine di 10 anni di ingegneria. Lavorando a stretto contatto con i marchi di bellezza, ModiFace è in grado di fornire un'esperienza utente rapidissima e facile da seguire, incoraggiando al tempo stesso la reperibilità dei prodotti.

La tecnologia di ModiFace alimenta più di 200 app di realtà aumentata per marchi di bellezza di fascia alta, inclusi numerosi specchi intelligenti, che consentono ai clienti di provare virtualmente il trucco in tempo reale. Credito fotografico: ModiFace.

La sua tecnologia non si ferma a smartphone app, estendendole anche ai negozi al dettaglio. A novembre, MAC Cosmetics ha debuttato Specchio di prova virtuale MAC in determinate località. Lo specchio consente ai clienti di provare virtualmente il trucco in tempo reale scorrendo l'interfaccia. Aiuta a eliminare la necessità di testare molti prodotti in negozio, restringendo il campo agli stili che ti piacciono di più.

Mettere la sua tecnologia sul Galaxy S9

La stessa tecnologia e concetto sono ciò che è disponibile sul nuovo Galassia S9. Collaborando con Samsung, ModiFace è stata in grado di ottimizzare l'esperienza.

"Iniziando internamente, addestriamo le nostre reti neurali su migliaia di immagini per creare il tracciamento di base e l'analisi del volto per le nostre app", ha affermato Houghton. “Questa rete neurale viene quindi incorporata nell’app Samsung. Abbiamo lavorato con Samsung per modificare diversi parametri per assicurarci di ottenere gli effetti che i marchi e gli utenti finali desiderano vedere”.

La partnership tra le due società potrebbe dare il via a una nuova tendenza per i produttori di telefoni. Mentre la tecnologia della bellezza è ancora agli inizi, il trucco è arrivato sui nostri schermi da anni attraverso i social media. Che si tratti di tutorial su YouTube o Instagram, le persone guardano costantemente ai propri smartphone per trovare nuova ispirazione quando si tratta di trucco. Con il Galassia S9, tutto quello che devi fare è aprire la fotocamera e avrai a tua disposizione un catalogo di trucchi.

Sul Galaxy S9, puoi cercare tra una varietà di diversi prodotti cosmetici disponibili sia da Sephora che da Cover Girl e puoi acquistarli sul posto. Mentre scorri ciascun prodotto, si applicherà al tuo viso come i filtri Snapchat.

Utilizzando il tracciamento facciale e il rendering video 3D, i filtri del trucco vengono mappati sul viso a 30 fotogrammi al secondo. Non c'è ritardo e nulla è disallineato. Funziona istantaneamente quando tocchi il prossimo prodotto che desideri provare. Puoi provare look completi, che includono rossetto, fondotinta, ombretto, fard, mascara ed eyeliner, oppure puoi provarli tutti separatamente.

Provare il fondotinta può essere estremamente complicato, quasi sempre richiede la presenza in negozio e l'aiuto di un dipendente per trovare la tonalità esatta. Ci sono anche diversi tipi di fondotinta da prendere in considerazione: opaco, trasparente, a base d'acqua o che fornisce una copertura completa. Per assicurarsi che le sfumature fossero quanto più precise possibile, il team di ModiFace ha esaminato attentamente ciascun prodotto e ha confrontato il suo aspetto nella vita reale con quello sul reale. smartphone. Hanno lavorato direttamente sia con Samsung che con i marchi per creare un rendering corrispondente.

"Io stesso sono stato effettivamente coinvolto in quel processo ed è molto divertente", ha detto Houghton. "Puoi provare un sacco di cose diverse, poi puoi cancellarle e vedere come appaiono nell'app. Implica un sacco di confronti di screenshot e lavoro manuale per assicurarsi che il prodotto che abbiamo incluso sia semplicemente perfetto.

Ma c’è sempre spazio per miglioramenti. Utilizzando il deep learning e la ricerca sulle immagini, il team studia i dati interni – raccolti da coloro che stanno testando il prodotto finale – per saperne di più sul volto di un utente al fine di addestrare i suoi algoritmi. Ciò aiuta a produrre risultati migliori quando si tratta di fattori come il modo in cui i colori si mescolano sulle labbra e la luce aggiunto a quei colori e come dovrebbe apparire il tuo viso sotto un'illuminazione diversa se hai un fondotinta specifico SU. I dati aiutano anche a migliorare la consistenza e la copertura complessiva del trucco.

Con questo tipo di deep learning, l’azienda è in grado di creare effetti nuovi e più realistici. Recentemente, ModiFace ha collaborato con L'Oreal per creare il tracciamento dei capelli 3D in grado di ricolorare i capelli in tempo reale. L'azienda ha in programma di collaborare con Samsung per apportare effetti simili ai suoi telefoni.

Ma per chi ha problemi di privacy, Modiface non raccoglie né monitora alcun dato dalle sue applicazioni quando sono nelle mani degli utenti. Tutte le immagini scattate con le app non lasceranno mai il tuo dispositivo.

Raccomandazioni degli editori

• Il Galaxy Tab S9 Ultra sembra uno dei tablet più entusiasmanti del 2023
• Il Galaxy Tab S9 di Samsung potrebbe avere una funzionalità che l'iPad non ha mai avuto
• Ottieni il Samsung Galaxy S9 con Amazon Echo ed Echo Spot per $ 520
• Le vendite lente del Galaxy S9 portano al crollo del secondo trimestre per Samsung

Migliora il tuo stile di vitaDigital Trends aiuta i lettori a tenere d'occhio il frenetico mondo della tecnologia con tutte le ultime notizie, divertenti recensioni di prodotti, editoriali approfonditi e anteprime uniche nel loro genere.