ModiFace, 삼성과 제휴해 갤럭시 S9에 AR 메이크업 구현

브렌다 스톨리아/디지털 트렌드

MWC 2023의 전체 내용을 확인하세요

삼성의 갤럭시 S9 및 S9 플러스 다양하게 가지고 오세요 새로운 카메라 기능 포함 AR 이모지, 슈퍼 슬로우 모션, 그리고 가변 조리개. 하지만 이전에 스마트폰에 내장된 적이 없는 새로운 트릭이 하나 더 있습니다. 바로 Bixby Vision의 증강 현실 메이크업 도구입니다.

S9의 카메라 앱에 내장된 메이크업을 사용하면 증강 현실을 통해 얼굴에 다양한 제품을 적용할 수 있습니다. 셀카 카메라를 얼굴에 비추면 Snapchat 필터와 마찬가지로 선택한 메이크업 스타일이 얼굴 위에 겹쳐집니다. 장점은 집에서 편안하게 메이크업을 시도할 수 있으면서도 나중에 정리할 필요가 없다는 것입니다. 이런 종류의 기능이 내장된 것은 처음입니다. 스마트 폰, 그러나 기술은 새로운 것이 아닙니다. 삼성이 도청했다 모디페이스는 이 분야에서 10년 이상의 연구를 진행한 기업으로 자사의 뷰티 AR 기술을 카메라에 접목시키기 위해 노력하고 있습니다.

스킨케어부터 증강현실 메이크업까지

혹시 사용해보신 분이라면 세포라 앱 가상으로 메이크업을 시도하거나 베네피트 브로우 트라이온 새로운 눈썹 모양을 테스트하기 위해 앱을 사용한 후 ModiFace의 AR 기술을 사용한 것입니다. 이 회사는 현재 200개 이상의 맞춤형 서비스를 제공하고 있습니다. 증강 현실 앱 하이엔드 뷰티 브랜드의 경우, 모든 것은 처음에는 스킨케어에서 시작되었습니다.

스마트 폰 이러한 인기는 ModiFace가 증강 현실로 기술을 테스트하도록 영감을 주었습니다.

이전 스마트 폰 혁명 이후 ModiFace는 피부과 전문의 및 특정 브랜드와 협력하여 사람들이 피부 관리 문제에 대한 솔루션을 찾을 수 있도록 도왔습니다.

사람들은 자신의 사진을 웹 앱에 업로드할 수 있었고, 회사는 이를 처리하여 문제 영역을 정확히 찾아내고 스킨케어 루틴에 대한 개선 사항을 제안했습니다.

ModiFace는 원래 웹 앱에서 2D 이미지를 사용했지만 기술이 발전함에 따라 회사는 곧 사용자가 비디오를 업로드할 수 있도록 전환할 수 있었습니다. 스마트폰이 인기를 얻자 ModiFace는 증강 현실로 기술을 테스트하기 시작했고 지원되는 기능 목록에 메이크업과 헤어를 추가했습니다.

"와 더불어 스마트 폰 붐, AR을 우리 회사에 바로 도입할 수 있게 해 주었기 때문에 우리가 확장할 수 있는 완벽한 기회였습니다. ModiFace 기술 부문 부사장인 Jeff Houghton은 Digital과의 인터뷰에서 이렇게 말했습니다. 동향.

현재 소프트웨어 개발 키트(SDK)는 10년 간의 엔지니어링의 정점입니다. ModiFace는 뷰티 브랜드와 긴밀하게 협력하여 매우 빠르고 따라하기 쉬운 사용자 경험을 제공하는 동시에 제품 검색 가능성을 장려할 수 있습니다.

ModiFace의 기술은 고객이 실시간으로 가상으로 메이크업을 시도할 수 있는 수많은 스마트 거울을 포함하여 고급 뷰티 브랜드를 위한 200개 이상의 증강 현실 앱을 지원합니다. 사진 제공: ModiFace.

그 기술은 여기서 멈추지 않습니다 스마트 폰 앱을 소매점까지 확장합니다. 지난 11월, 맥 코스메틱스(MAC Cosmetics)가 MAC 가상 체험 거울 특정 위치에서. 거울을 통해 고객은 인터페이스 전체를 스와이프하여 가상으로 실시간으로 메이크업을 시도할 수 있습니다. 매장에서 많은 제품을 테스트할 필요가 없어 가장 좋아하는 스타일로 범위를 좁힐 수 있습니다.

갤럭시 S9에 기술을 담다

동일한 기술과 개념은 새로운 제품에서도 사용할 수 있습니다. 갤럭시 S9. ModiFace는 삼성과의 협력을 통해 경험을 최적화할 수 있었습니다.

Houghton은 “사내에서 시작하여 수천 개의 이미지로 신경망을 훈련하여 앱에 대한 기본 추적 및 얼굴 분석을 생성합니다.”라고 말했습니다. “이 신경망은 삼성 앱에 내장됩니다. 우리는 브랜드와 최종 사용자가 보고 싶어하는 효과를 얻을 수 있도록 삼성과 협력하여 여러 매개변수를 조정했습니다.”

두 회사 간의 파트너십은 휴대폰 제조업체에 새로운 트렌드를 시작할 수 있습니다. 뷰티 기술은 아직 초기 단계에 있지만, 메이크업은 소셜 미디어를 통해 수년간 우리 화면에 등장했습니다. YouTube든 Instagram 튜토리얼이든 사람들은 메이크업에 관한 새로운 영감을 찾기 위해 끊임없이 스마트폰을 찾고 있습니다. 와 더불어 갤럭시 S9, 카메라를 밀어서 열기만 하면 메이크업 카탈로그를 마음껏 사용할 수 있습니다.

갤럭시S9에서는 세포라와 커버걸에서 다양한 화장품을 검색하고, 현장에서 구매할 수 있다. 각 제품을 스크롤하면 Snapchat 필터처럼 얼굴에 적용됩니다.

얼굴 추적 및 3D 비디오 렌더링을 사용하여 메이크업 필터가 초당 30프레임으로 얼굴에 매핑됩니다. 지연도 없고 잘못 정렬된 것도 없습니다. 입어보고 싶은 다음 제품을 탭하는 것처럼 즉시 작동합니다. 립스틱, 파운데이션, 아이섀도, 블러셔, 마스카라, 아이라이너 등 전체 룩을 시험해 볼 수도 있고, 개별적으로 모두 시험해 볼 수도 있습니다.

파운데이션을 시험해 보는 것은 매우 까다로울 수 있으며 거의 ​​항상 매장에 가서 직원의 도움을 받아 정확한 색상을 찾아야 합니다. 또한 고려해야 할 다양한 파운데이션 유형이 있습니다. 매트, 쉬어, 워터 베이스 또는 전체 커버력을 제공하는 파운데이션입니다. 색상이 최대한 정확한지 확인하기 위해 ModiFace 팀은 각 제품을 지루하게 살펴보고 실제 모습과 실제 모습을 비교했습니다. 스마트 폰. 그들은 일치하는 렌더링을 만들기 위해 삼성 및 브랜드와 직접 협력했습니다.

Houghton은 “나 자신도 실제로 그 과정에 참여했고 정말 재미있었다”고 말했습니다. “다양한 것을 시도해 본 다음 닦아내고 앱에서 어떻게 보이는지 확인하게 됩니다. 우리가 포함시킨 제품이 완벽한지 확인하기 위해서는 수많은 스크린샷 비교와 수동 작업이 필요합니다.”

하지만 여전히 개선의 여지가 있습니다. 딥 러닝과 이미지 연구를 통해 팀은 최종 제품을 테스트하는 사람들로부터 수집한 내부 데이터를 연구하여 알고리즘을 훈련하기 위해 사용자의 얼굴에 대해 더 자세히 알아봅니다. 이렇게 하면 색상이 입술에 어떻게 섞이는지, 빛이 어떻게 들어오는지와 같은 요소에 관해 더 나은 결과를 얻는 데 도움이 됩니다. 해당 색상에 추가하고 특정 파운데이션이 있는 경우 다른 조명 아래에서 얼굴이 어떻게 보일지 에. 또한, 데이터는 메이크업의 질감과 전체적인 커버력을 개선하는 데에도 도움이 됩니다.

이런 딥러닝을 통해 회사는 새롭고 더욱 현실적인 효과를 만들어 낼 수 있습니다. 최근 ModiFace는 L'Oreal과 제휴하여 실시간으로 머리카락을 다시 염색할 수 있는 3D 헤어 트래킹을 개발했습니다. 회사는 삼성과 협력하여 휴대폰에 유사한 효과를 가져올 계획을 가지고 있습니다.

그러나 개인 정보 보호가 우려되는 사람들을 위해 Modiface는 사용자가 사용할 때 애플리케이션에서 데이터를 수집하거나 모니터링하지 않습니다. 앱으로 촬영한 모든 이미지는 기기 외부로 유출되지 않습니다.

편집자의 추천

• 갤럭시 탭 S9 울트라는 2023년 가장 흥미로운 태블릿 중 하나로 보입니다.
• 삼성 갤럭시 탭 S9에 아이패드에는 없었던 기능이 탑재될 수도 있다
• Amazon Echo 및 Echo Spot이 포함된 Samsung Galaxy S9를 520달러에 구매하세요
• 갤럭시S9 판매 부진, 삼성전자 2분기 부진 원인

당신의 라이프스타일을 업그레이드하세요Digital Trends는 독자들이 모든 최신 뉴스, 재미있는 제품 리뷰, 통찰력 있는 사설 및 독특한 미리보기를 통해 빠르게 변화하는 기술 세계를 계속해서 살펴볼 수 있도록 도와줍니다.