ModiFace си партнира със Samsung, за да внесе AR грим в Galaxy S9

Бренда Столяр/Дигитални тенденции

Вижте пълното ни отразяване на MWC 2023

на Samsung Galaxy S9 и S9 Plus идват с разнообразие от нови функции на камерата включително AR Emoji, Супер бавен каданси а променлива бленда. Но има още един нов трик, който никога досега не сме виждали вграден в смартфон – инструментът за грим с добавена реалност в Bixby Vision.

Вграден в приложението за камера на S9, гримът ви позволява да прилагате различни продукти върху лицето си с добавена реалност. Насочете камерата за селфита към лицето си и избраните от вас стилове на грим се наслояват върху лицето ви, точно като филтрите на Snapchat. Предимството е, че пробвате грима в уюта на собствения си дом, като същевременно избягвате необходимостта да почиствате след това. Това е първият път, когато виждаме подобен вид функция, вградена в a смартфон, но технологията далеч не е нова. Samsung почука ModiFace, компания с повече от десетилетие изследвания в тази област, за да интегрира своята AR технология за красота във фотоапарата.

От грижа за кожата до грим с добавена реалност

Ако някога сте използвали Приложение Sephora за виртуално изпробване на грим, или Пробване на веждите на Benefit приложение, за да изпробвате нова форма на вежди, тогава сте използвали AR технологията на ModiFace. Компанията сега захранва повече от 200 персонализирани приложения с добавена реалност за козметични марки от висок клас, но всичко първоначално започна с грижа за кожата.

Смартфон популярността вдъхнови ModiFace да тества технологията си с добавена реалност.

Преди смартфон революция, ModiFace работи с дерматолози и определени марки, за да помогне на хората да намерят решения за грижи за кожата.

Хората биха могли да качат своя снимка в уеб приложение и компанията ще я обработи, за да посочи проблемните зони и да предложи подобрения в рутинните грижи за кожата.

Първоначално ModiFace използва 2D изображения с уеб приложението, но с напредването на технологиите компанията скоро успя да премине към позволяване на потребителите да качват видео. Когато смартфоните станаха популярни, ModiFace започна да тества своята технология с разширена реалност и добави грим и прическа към своя списък с поддържани функции.

„С смартфон бум, това беше идеалната възможност за нас да се разширим, защото ни позволи да пренесем AR точно в нашите потребители в [тяхната] длан“, каза Джеф Хотън, вицепрезидент по технологиите на ModiFace, пред Digital Тенденции.

Текущите комплекти за разработка на софтуер (SDK) са кулминацията на 10 години инженерство. Работейки в тясно сътрудничество с марките за красота, ModiFace е в състояние да осигури светкавично бързо и лесно за следване потребителско изживяване, като същевременно насърчава откриваемостта на продукта.

Технологията на ModiFace захранва повече от 200 приложения с добавена реалност за козметични марки от висок клас, включително множество интелигентни огледала, които позволяват на клиентите виртуално да пробват грима в реално време. Снимка: ModiFace.

Технологията му не спира до смартфон приложения, разширяващи се и до магазините за търговия на дребно. През ноември MAC Cosmetics дебютира MAC Виртуално огледало за пробване на определени места. Огледалото позволява на клиентите виртуално да пробват грима в реално време, като плъзгат през целия интерфейс. Помага да се елиминира необходимостта от тестване на много продукти в магазина, като се стеснява до стиловете, които харесвате най-много.

Поставя своята технология върху Galaxy S9

Същата технология и концепция е това, което се предлага в новия Galaxy S9. Сътрудничейки със Samsung, ModiFace успя да оптимизира изживяването.

„Започвайки вътрешно, ние обучаваме нашите невронни мрежи на хиляди изображения, за да създадем базовото проследяване и анализ на лица за нашите приложения“, каза Хотън. „След това тази невронна мрежа се вгражда в приложението на Samsung. Работихме със Samsung, за да коригираме няколко параметъра, за да сме сигурни, че постигаме ефектите, които марките и крайните потребители искат да видят.“

Партньорството между двете компании може да постави началото на нова тенденция за производителите на телефони. Докато технологията за красота е все още в начален стадий, гримът е намерил своя път към нашите екрани от години чрез социалните медии. Независимо дали става дума за уроци в YouTube или Instagram, хората непрекъснато търсят своите смартфони, за да намерят ново вдъхновение, когато става въпрос за грим. С Galaxy S9, всичко, което трябва да направите, е да отворите камерата и имате каталог с гримове на ваше разположение.

На Galaxy S9 можете да търсите в разнообразие от различни козметични продукти, налични както от Sephora, така и от Cover Girl, и можете да ги закупите на място. Докато превъртате през всеки продукт, той ще се приложи върху лицето ви като Snapchat филтри.

Използвайки проследяване на лицето и 3D видео изобразяване, филтрите за грим се нанасят върху лицето при 30 кадъра в секунда. Няма забавяне и нищо не е неправилно подравнено. Работи толкова мигновено, колкото и да докоснете следващия продукт, който искате да пробвате. Можете да опитате цялостни визии – което включва червило, фон дьо тен, сенки за очи, руж, спирала и очна линия – или можете да опитате всички поотделно.

Изпробването на фон дьо тен може да бъде изключително трудно, почти винаги изисква да сте в магазина и служител да ви помогне да намерите точния нюанс. Има и различни типове фон дьо тен, които трябва да вземете предвид – матови, прозрачни, на водна основа или такива, които осигуряват пълно покритие. За да се увери, че нюансите са възможно най-точни, екипът на ModiFace досадно прегледа всеки продукт и сравни как изглежда в реалния живот с това как изглежда на смартфон. Те са работили както със Samsung, така и директно с марките, за да създадат съответстващ рендер.

„Аз самият всъщност участвах в този процес и е доста забавно“, каза Хютън. „Можете да опитате много различни неща, след което можете да ги изтриете и да видите как изглеждат в приложението. Това включва много сравнение на екранни снимки и ръчна работа, за да сме сигурни, че продуктът, който сме включили, е просто перфектен.“

Но винаги има място за подобрение. Използвайки задълбочено обучение и изследване на изображения, екипът изучава вътрешни данни — събрани от тези, които тестват крайния продукт — за да научи повече за лицето на потребителя, за да обучи неговите алгоритми. Това помага за постигане на по-добри резултати, когато става въпрос за фактори като това как цветовете се смесват върху устните ви, как попада светлина добавени в тези цветове и как трябва да изглежда лицето ви при различно осветление, ако имате специфична основа На. Данните също помагат за подобряване на текстурата и цялостното покритие на грима.

С този вид дълбоко обучение компанията е в състояние да създаде нови и по-реалистични ефекти. Наскоро ModiFace си партнира с L'Oreal, за да създаде 3D проследяване на косата, което може да пребоядиса косата ви в реално време. Компанията планира да работи със Samsung, за да донесе подобни ефекти на своите телефони.

Но за тези, които имат опасения за поверителността, Modiface не събира и не следи никакви данни от своите приложения, когато са в ръцете на потребителите. Всички изображения, които правите с приложенията, никога няма да напуснат вашето устройство.

Препоръки на редакторите

• Galaxy Tab S9 Ultra изглежда като един от най-вълнуващите таблети на 2023 г
• Galaxy Tab S9 на Samsung може да получи функция, която iPad никога не е имал
• Вземете Samsung Galaxy S9 с Amazon Echo и Echo Spot за $520
• Бавните продажби на Galaxy S9 водят до спад за второто тримесечие на Samsung

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.