ModiFace が Samsung と提携して Galaxy S9 に AR メイクを導入

ブレンダ・ストーリヤー/デジタルトレンド

MWC 2023 の完全な内容をご覧ください。

サムスンの Galaxy S9 および S9 プラス さまざまなものが付属しています 新しいカメラ機能 含む AR絵文字, スーパースローモーション、そして 可変絞り. しかし、これまでスマートフォンに組み込まれたことのない新しいトリックがもう 1 つあります。それは、Bixby Vision の拡張現実メイクアップ ツールです。

S9 のカメラ アプリに組み込まれた Makeup を使用すると、拡張現実を使用してさまざまな製品を顔に適用できます。 自撮りカメラを自分の顔に向けると、Snapchat のフィルターとまったく同じように、選択したメイクアップ スタイルが顔の上に重ねられます。 利点は、自宅で快適にメイクを試しながら、その後の片づけの必要性を回避できることです。 この種の機能がシステムに組み込まれているのは初めてです。 スマートフォン, しかし、この技術は決して新しいものではありません。 サムスンが盗聴 モディフェイスは、この分野で 10 年以上の研究を行っている企業で、自社の美容 AR テクノロジーをカメラに統合します。

スキンケアから拡張現実メイクアップまで

を使用したことがある場合は、 セフォラアプリ バーチャルにメイクを試着したり、 ベネフィットの眉試着 アプリを使って新しい眉毛の形をテストしたら、ModiFace の AR テクノロジーを使用したことになります。 同社は現在 200 以上のカスタム製品をサポートしています。 拡張現実アプリ 高級美容ブランド向けの製品ですが、最初はスキンケアから始まりました。

スマートフォン その人気に触発されて、ModiFace は拡張現実を使ってそのテクノロジーをテストするようになりました。

の前に スマートフォン 革命に伴い、ModiFace は皮膚科医や特定のブランドと協力して、人々がスキンケアの問題の解決策を見つけられるよう支援しました。

ユーザーは自分の写真を Web アプリにアップロードでき、企業はそれを処理して問題のある領域を特定し、スキンケア ルーチンの改善を提案します。

ModiFace は当初、Web アプリで 2D 画像を使用していましたが、テクノロジーの進歩に伴い、すぐにユーザーがビデオをアップロードできるようになりました。 スマートフォンが普及すると、ModiFace は拡張現実を使ったテクノロジーのテストを開始し、サポートされる機能の一覧にメイクアップとヘアを追加しました。

"とともに スマートフォン AR を私たちの職場に直接導入できるようになったので、これは私たちにとって拡大する絶好の機会でした。 ユーザーは手のひらの中にいます」とModiFaceのテクノロジー担当副社長、ジェフ・ホートン氏はDigitalに語った。 トレンド。

現在のソフトウェア開発キット (SDK) は、10 年間にわたるエンジニアリングの集大成です。 美容ブランドと緊密に連携することで、ModiFace は、製品の見つけやすさを促進しながら、超高速でわかりやすいユーザー エクスペリエンスを提供することができます。

ModiFace のテクノロジーは、多数のスマート ミラーを含む、ハイエンドの美容ブランド向けの 200 以上の拡張現実アプリを強化しており、顧客がリアルタイムでメイクアップを仮想的に試すことができます。 写真提供: ModiFace。

その技術はそれだけではありません スマートフォン アプリを小売店にも拡張します。 11月に遡ると、MAC化粧品は MAC 仮想試着ミラー 特定の場所で。 ミラーを使用すると、顧客はインターフェイス全体をスワイプすることで、リアルタイムで仮想的にメイクアップを試すことができます。 店頭で多くの製品を試す必要がなくなり、最も気に入ったスタイルに絞り込むことができます。

その技術をGalaxy S9に搭載

同じテクノロジーとコンセプトが新しいモデルでも利用可能です ギャラクシーS9. Samsung との協力により、ModiFace はエクスペリエンスを最適化することができました。

「社内で始めて、何千枚もの画像でニューラル ネットワークをトレーニングして、アプリの基本追跡と顔分析を作成します」とホートン氏は述べています。 「このニューラル ネットワークはサムスンのアプリ内に組み込まれます。 私たちはサムスンと協力していくつかのパラメータを調整し、ブランドやエンドユーザーが望む効果を確実に達成できるようにしました。」

両社の提携により、携帯電話メーカーにとって新たなトレンドが始まる可能性がある。 美容テクノロジーはまだ初期段階にありますが、メイクアップは何年にもわたってソーシャル メディアを通じて私たちのスクリーンに登場してきました。 YouTube であれ、Instagram であれ、メイクに関しては、人々は常にスマートフォンに目を向けて新しいインスピレーションを求めています。 とともに ギャラクシーS9、カメラをスワイプして開くだけで、メイクアップのカタログを自由に利用できます。

Galaxy S9 では、Sephora または Cover Girl から販売されているさまざまな化粧品を検索し、その場で購入することができます。 各製品をスクロールすると、Snapchat フィルターのように顔に適用されます。

顔の追跡と 3D ビデオ レンダリングを使用して、メイクアップ フィルターが 30 フレーム/秒で顔にマッピングされます。 遅延もなく、ずれもありません。 試着したい次の製品をタップするのと同じくらい瞬時に機能します。 口紅、ファンデーション、アイシャドウ、チーク、マスカラ、アイライナーを含む完全な外観を試すことも、すべてを個別に試すこともできます。

ファンデーションを試着するのは非常に難しい場合があり、ほとんどの場合、店舗に行って従業員に正確な色合いを見つけるのを手伝ってもらう必要があります。 マット、シアー、ウォーターベース、または完全にカバーするファンデーションなど、考慮すべきさまざまなファンデーションのタイプもあります。 色合いが可能な限り正確であることを確認するために、ModiFace チームは各製品を丹念に調べ、実際の見た目と実物での見た目を比較しました。 スマートフォン. 彼らはサムスンとブランドの両方と直接協力して、一致するレンダリングを作成しました。

「私自身も実際にそのプロセスに関わっていましたが、とても楽しいものでした」とホートン氏は語った。 「さまざまなものを試着し、拭き取ってアプリでどう見えるかを確認します。 私たちが含めた製品が完璧であることを確認するために、多くのスクリーンショットの比較と手作業が必要になります。」

しかし、改善の余地は常にあります。 チームは、アルゴリズムをトレーニングするために、ディープラーニングと画像研究を使用して、最終製品をテストしている人々から収集した内部データを研究し、ユーザーの顔についてさらに学習します。 これは、色が唇にどのように混ざり合うか、光がどのように当たるかなどの要素に関して、より良い結果を生み出すのに役立ちます。 特定のファンデーションを使用している場合、さまざまな照明の下で顔がどのように見えるか、それらの色に追加されます。 の上。 このデータは、メイクアップの質感や全体的なカバー力を向上させるのにも役立ちます。

この種の深層学習により、同社は新しく、より現実的な効果を生み出すことができます。 最近、ModiFace はロレアルと提携して、リアルタイムで髪の色を変更できる 3D ヘア トラッキングを作成しました。 同社はサムスンと協力して自社の携帯電話に同様の効果をもたらす計画を立てている。

ただし、プライバシーを懸念する人のために、Modiface は、ユーザーの手に渡っているアプリケーションからデータを収集したり監視したりすることはありません。 アプリで撮影した画像はデバイスから離れることはありません。

編集者のおすすめ

• Galaxy Tab S9 Ultraは、2023年で最もエキサイティングなタブレットの1つになりそうだ
• サムスンのGalaxy Tab S9はiPadにはない機能を搭載するかもしれない
• Amazon Echo と Echo Spot を備えた Samsung Galaxy S9 を 520 ドルで入手
• Galaxy S9の販売不振がサムスンの第2四半期の不振につながる

ライフスタイルをアップグレードするDigital Trends は、読者が最新ニュース、楽しい製品レビュー、洞察力に富んだ社説、ユニークなスニーク ピークをすべて提供して、ペースの速いテクノロジーの世界を監視するのに役立ちます。