ModiFace s'associe à Samsung pour apporter le maquillage AR au Galaxy S9

Brenda Stolyar/Tendances numériques

Découvrez notre couverture complète du MWC 2023

Samsung Galaxy S9 et S9 Plus venir avec une variété de nouvelles fonctionnalités de l'appareil photo y compris Emoji AR, Super ralenti, et un ouverture variable. Mais il existe une autre nouvelle astuce que nous n’avons jamais vue intégrée à un smartphone auparavant: l’outil de maquillage en réalité augmentée de Bixby Vision.

Intégré à l'application appareil photo du S9, Makeup vous permet d'appliquer différents produits sur votre visage avec la réalité augmentée. Pointez la caméra selfie vers votre visage et les styles de maquillage que vous choisissez seront superposés sur votre visage, exactement comme les filtres Snapchat. L’avantage est que vous essayez le maquillage dans le confort de votre propre maison, tout en évitant d’avoir à nettoyer par la suite. C’est la première fois que nous voyons ce type de fonctionnalité intégrée à un téléphone intelligent, mais la technologie est loin d’être nouvelle. Samsung a fait appel à

ModiFace, une entreprise avec plus d'une décennie de recherche dans ce domaine, pour intégrer sa technologie beauté AR dans l'appareil photo.

Du soin au maquillage en réalité augmentée

Si vous avez déjà utilisé le Application Séphora pour essayer virtuellement du maquillage, ou Essayage des sourcils de Benefit application pour tester une nouvelle forme de sourcil, alors vous avez utilisé la technologie AR de ModiFace. L'entreprise alimente désormais plus de 200 véhicules personnalisés applications de réalité augmentée pour les marques de beauté haut de gamme, mais tout a commencé avec les soins de la peau.

Téléphone intelligent La popularité a inspiré ModiFace à tester sa technologie avec la réalité augmentée.

Avant le téléphone intelligent révolution, ModiFace a travaillé avec des dermatologues et certaines marques pour aider les gens à trouver des solutions aux problèmes de soins de la peau.

Les gens pourraient télécharger une photo d’eux-mêmes sur une application Web, et l’entreprise la traiterait pour identifier les zones à problèmes et suggérer des améliorations aux routines de soins de la peau.

ModiFace utilisait à l'origine des images 2D avec l'application Web, mais à mesure que la technologie progressait, la société a rapidement pu permettre aux utilisateurs de télécharger des vidéos. Lorsque les smartphones sont devenus populaires, ModiFace a commencé à tester sa technologie avec la réalité augmentée et a ajouté le maquillage et la coiffure à sa liste de fonctionnalités prises en charge.

"Avec le téléphone intelligent boom, c'était l'opportunité idéale pour nous de nous développer car cela nous a permis d'amener la RA directement dans notre utilisateurs dans la paume de [leur] main », a déclaré Jeff Houghton, vice-président de la technologie de ModiFace, à Digital Les tendances.

Ses kits de développement logiciel (SDK) actuels sont l'aboutissement de 10 années d'ingénierie. En travaillant en étroite collaboration avec les marques de beauté, ModiFace est en mesure de fournir une expérience utilisateur ultra-rapide et facile à suivre, tout en encourageant la découverte des produits.

La technologie de ModiFace alimente plus de 200 applications de réalité augmentée pour des marques de beauté haut de gamme, notamment de nombreux miroirs intelligents, qui permettent aux clients d'essayer virtuellement leur maquillage en temps réel. Crédit photo: ModiFace.

Sa technologie ne s'arrête pas à téléphone intelligent applications, s'étendant également aux magasins de détail. En novembre dernier, MAC Cosmetics a lancé son Miroir d'essai virtuel MAC à certains endroits. Le miroir permet aux clients d'essayer virtuellement leur maquillage en temps réel en faisant glisser leur doigt sur l'interface. Cela permet d’éliminer le besoin de tester de nombreux produits en magasin, en les limitant aux styles que vous aimez le plus.

Mettre sa technologie sur le Galaxy S9

La même technologie et le même concept sont disponibles sur le nouveau Galaxie S9. En collaborant avec Samsung, ModiFace a pu optimiser l'expérience.

"En commençant en interne, nous entraînons nos réseaux neuronaux sur des milliers d'images afin de créer le suivi de base et l'analyse des visages pour nos applications", a déclaré Houghton. « Ce réseau neuronal est ensuite intégré à l’application de Samsung. Nous avons travaillé avec Samsung pour ajuster plusieurs paramètres afin de nous assurer que nous obtenions les effets souhaités par les marques et les utilisateurs finaux.

Le partenariat entre les deux sociétés pourrait lancer une nouvelle tendance pour les fabricants de téléphones. Alors que la technologie de la beauté en est encore à ses balbutiements, le maquillage fait son chemin sur nos écrans depuis des années grâce aux réseaux sociaux. Qu’il s’agisse de tutoriels YouTube ou Instagram, les gens se tournent constamment vers leur smartphone pour trouver de nouvelles inspirations en matière de maquillage. Avec le Galaxie S9, tout ce que vous avez à faire est d'ouvrir l'appareil photo et vous avez un catalogue de maquillage à votre disposition.

Sur le Galaxy S9, vous pouvez rechercher parmi une variété de produits cosmétiques différents disponibles chez Sephora ou Cover Girl, et vous pouvez les acheter sur place. Au fur et à mesure que vous faites défiler chaque produit, il s'appliquera à votre visage comme les filtres Snapchat.

Grâce au suivi du visage et au rendu vidéo 3D, les filtres de maquillage sont mappés sur le visage à 30 images par seconde. Il n’y a aucun décalage et rien n’est mal aligné. Cela fonctionne aussi instantanément que vous appuyez sur le prochain produit que vous souhaitez essayer. Vous pouvez essayer des looks complets – comprenant du rouge à lèvres, du fond de teint, du fard à paupières, du fard à joues, du mascara et de l’eye-liner – ou vous pouvez les essayer tous séparément.

Essayer un fond de teint peut être extrêmement délicat et nécessite presque toujours d'être au magasin et de demander à un employé de vous aider à trouver votre teinte exacte. Il existe également différents types de fonds de teint à prendre en compte: mats, transparents, à base d’eau ou offrant une couvrance totale. Pour s'assurer que les nuances sont aussi précises que possible, l'équipe ModiFace a minutieusement examiné chaque produit et comparé son apparence réelle à celle sur le produit. téléphone intelligent. Ils ont travaillé directement avec Samsung et les marques pour créer un rendu correspondant.

"J'ai moi-même été impliqué dans ce processus et c'est plutôt très amusant", a déclaré Houghton. « Vous pouvez essayer beaucoup de choses différentes, puis vous pouvez les effacer et voir à quoi elles ressemblent dans l'application. Cela implique beaucoup de comparaisons de captures d’écran et de travail manuel pour s’assurer que le produit que nous avons inclus est tout simplement parfait.

Mais il y a toujours place à l’amélioration. À l’aide de l’apprentissage profond et de la recherche d’images, l’équipe étudie les données internes – recueillies auprès de ceux qui testent le produit final – pour en savoir plus sur le visage d’un utilisateur afin d’entraîner ses algorithmes. Cela permet d'obtenir de meilleurs résultats en ce qui concerne des facteurs tels que la manière dont les couleurs se mélangent sur vos lèvres, la façon dont la lumière passe. ajouté à ces couleurs, et à quoi devrait ressembler votre visage sous un éclairage différent si vous avez un fond de teint spécifique sur. Les données contribuent également à améliorer la texture et la couverture globale du maquillage.

Grâce à ce type d’apprentissage profond, l’entreprise est capable de créer de nouveaux effets plus réalistes. Récemment, ModiFace s'est associé à L'Oréal pour créer un suivi capillaire 3D capable de recolorer vos cheveux en temps réel. La société envisage de travailler avec Samsung pour apporter des effets similaires à ses téléphones.

Mais pour ceux qui ont des problèmes de confidentialité, Modiface ne collecte ni ne surveille aucune donnée de ses applications lorsqu’elles sont entre les mains des utilisateurs. Toutes les images que vous prenez avec les applications ne quitteront jamais votre appareil.

Recommandations des rédacteurs

• La Galaxy Tab S9 Ultra ressemble à l’une des tablettes les plus excitantes de 2023
• La Galaxy Tab S9 de Samsung pourrait bénéficier d'une fonctionnalité que l'iPad n'a jamais eue
• Obtenez le Samsung Galaxy S9 avec un Amazon Echo et Echo Spot pour 520 $
• La faiblesse des ventes du Galaxy S9 entraîne un effondrement pour Samsung au deuxième trimestre

Améliorez votre style de vieDigital Trends aide les lecteurs à garder un œil sur le monde en évolution rapide de la technologie avec toutes les dernières nouvelles, des critiques de produits amusantes, des éditoriaux perspicaces et des aperçus uniques.