ModiFace співпрацює з Samsung, щоб запровадити AR макіяж у Galaxy S9

Бренда Столяр/Digital Trends

Перегляньте наше повне висвітлення MWC 2023

від Samsung Galaxy S9 і S9 Plus поставляються з різними нові функції камери в тому числі AR Emoji, Супер повільний рух, і a змінна діафрагма. Але є ще один новий трюк, який ми ніколи раніше не бачили вбудованим у смартфон, – інструмент макіяжу доповненої реальності в Bixby Vision.

Макіяж, вбудований у програму камери S9, дозволяє наносити різні продукти на обличчя за допомогою доповненої реальності. Наведіть камеру для селфі на своє обличчя, і вибрані вами стилі макіяжу будуть накладені на ваше обличчя, як фільтри Snapchat. Перевага полягає в тому, що ви пробуєте макіяж у комфорті власного дому, а також уникаєте необхідності прибирати після цього. Це перший раз, коли ми бачимо таку функцію, вбудовану в a смартфон, але технологія далеко не нова. Samsung постукав ModiFace, компанії з понад десятиріччям досліджень у цій галузі, щоб інтегрувати свою технологію AR у камеру.

Від догляду за шкірою до макіяжу доповненої реальності

Якщо ви коли-небудь використовували Додаток Sephora віртуально приміряти макіяж або Примірка брів Benefit щоб перевірити нову форму брів, то ви використали технологію AR ModiFace. Зараз компанія підтримує понад 200 кастом програми доповненої реальності для високоякісних косметичних брендів, але спочатку все почалося з догляду за шкірою.

Смартфон Популярність надихнула ModiFace протестувати свою технологію з доповненою реальністю.

Перед смартфон революції, ModiFace працював з дерматологами та певними брендами, щоб допомогти людям знайти рішення для проблем догляду за шкірою.

Люди могли завантажити свою фотографію у веб-додаток, а компанія обробляла її, щоб визначити проблемні зони та запропонувати покращення процедури догляду за шкірою.

ModiFace спочатку використовував 2D-зображення з веб-додатком, але з розвитком технологій компанія незабаром змогла перейти до дозволу користувачам завантажувати відео. Коли смартфони стали популярними, ModiFace почав тестувати свою технологію з доповненою реальністю та додав макіяж і зачіску до списку підтримуваних функцій.

«З смартфон Бум, це була ідеальна можливість для нас розширитися, оскільки це дозволило нам перенести доповнену реальність прямо до наших користувачів на [їхній] долоні», — сказав Джефф Хаутон, віце-президент із технологій ModiFace, Digital Тенденції.

Його поточні комплекти розробки програмного забезпечення (SDK) є кульмінацією 10 років розробки. Завдяки тісній співпраці з косметичними брендами, ModiFace може забезпечити блискавичну та просту взаємодію з користувачами, а також заохочувати пошук продукту.

Технологія ModiFace підтримує понад 200 додатків доповненої реальності для високоякісних косметичних брендів, включаючи численні розумні дзеркала, які дозволяють клієнтам віртуально приміряти макіяж у режимі реального часу. Фото: ModiFace.

Його технологія не закінчується смартфон додатків, що також поширюється на роздрібні магазини. Ще в листопаді MAC Cosmetics дебютувала MAC Virtual Try-On Mirror у певних місцях. Дзеркало дозволяє клієнтам віртуально приміряти макіяж у режимі реального часу, проводячи по інтерфейсу. Це допомагає позбутися від необхідності тестувати багато продуктів у магазині, звужуючи коло до стилів, які вам найбільше подобаються.

Впровадження своїх технологій у Galaxy S9

Ті самі технології та концепція доступні на новому Galaxy S9. Співпрацюючи з Samsung, ModiFace вдалося оптимізувати роботу.

«Починаючи вдома, ми навчаємо наші нейронні мережі на тисячах зображень, щоб створити базу відстеження та аналізу облич для наших додатків», — сказав Хоутон. «Потім цю нейронну мережу вбудовують у програму Samsung. Ми працювали з Samsung, щоб налаштувати кілька параметрів, щоб переконатися, що досягаємо ефектів, які хочуть бачити бренди та кінцеві користувачі».

Партнерство між двома компаніями може дати початок новому тренду для виробників телефонів. Незважаючи на те, що технологія краси все ще знаходиться в зародковому стані, макіяж протягом багатьох років знайшов шлях до наших екранів через соціальні мережі. Незалежно від того, чи це навчальні посібники на YouTube чи Instagram, люди постійно дивляться на свої смартфони, щоб знайти нове натхнення, коли справа доходить до макіяжу. З Galaxy S9, все, що вам потрібно зробити, це відкрити камеру, і у вашому розпорядженні буде каталог макіяжу.

На Galaxy S9 ви можете шукати різноманітні косметичні продукти, доступні як у Sephora, так і в Cover Girl, і ви можете придбати їх на місці. Коли ви прокручуєте кожен продукт, він застосовуватиметься до вашого обличчя, як фільтри Snapchat.

Використовуючи відстеження обличчя та візуалізацію 3D-відео, фільтри макіяжу відображаються на обличчі зі швидкістю 30 кадрів на секунду. Немає затримки, і нічого не зміщено. Він працює так само миттєво, як і ви натискаєте наступний продукт, який хочете приміряти. Ви можете спробувати цілий образ, який включає помаду, тональний крем, тіні для повік, рум’яна, туш і підводку для очей, або спробувати все окремо.

Приміряти тональний крем може бути надзвичайно складно, майже завжди потрібно бути в магазині та мати співробітника, який допоможе вам знайти точний відтінок. Існують також різні типи основи, яку слід взяти до уваги – матова, прозора, на водній основі або така, що забезпечує повне покриття. Щоб переконатися, що відтінки є якомога точними, команда ModiFace втомливо переглянула кожен продукт і порівняла, як він виглядав у реальному житті з тим, як виглядав на екрані. смартфон. Вони працювали безпосередньо з Samsung і брендами, щоб створити відповідний рендер.

«Я сам брав участь у цьому процесі, і це дуже весело», — сказав Хоутон. «Ти можеш приміряти багато різних речей, а потім стерти їх і подивитися, як вони виглядають у додатку. Це вимагає багато порівняння скріншотів і ручної роботи, щоб переконатися, що продукт, який ми включили, ідеальний».

Але завжди є місце для вдосконалення. Використовуючи глибоке навчання та дослідження зображень, команда вивчає внутрішні дані, зібрані від тих, хто тестує кінцевий продукт, щоб дізнатися більше про обличчя користувача та навчити його алгоритми. Це допомагає отримати кращі результати, коли йдеться про те, як кольори змішуються на ваших губах, як потрапляє світло додані в ці кольори, і як має виглядати ваше обличчя при різному освітленні, якщо у вас є конкретна основа на. Дані також допомагають покращити текстуру та загальне покриття макіяжу.

Завдяки такому глибокому навчанню компанія може створювати нові та більш реалістичні ефекти. Нещодавно ModiFace співпрацює з L’Oreal, щоб створити 3D-відстеження волосся, яке може перефарбувати ваше волосся в реальному часі. Компанія планує співпрацювати з Samsung, щоб забезпечити подібні ефекти для своїх телефонів.

Але для тих, кого хвилює конфіденційність, Modiface не збирає та не відстежує жодних даних із своїх програм, коли вони знаходяться в руках користувачів. Будь-які зображення, зроблені за допомогою програм, ніколи не залишать ваш пристрій.

Рекомендації редакції

• Galaxy Tab S9 Ultra виглядає як один із найцікавіших планшетів 2023 року
• Galaxy Tab S9 від Samsung може отримати функцію, якої iPad ніколи не мав
• Отримайте Samsung Galaxy S9 з Amazon Echo та Echo Spot за 520 доларів
• Повільні продажі Galaxy S9 призвели до падіння Samsung у другому кварталі

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.