Magische AR-Demo verwandelt 2D-Fotos in 3D-Animationen im „Harry Potter“-Stil

Photo Wake-Up: 3D-Charakteranimation aus einem einzigen Foto

Stellen Sie sich vor, Sie könnten Ihr Smartphone, Tablet oder Augmented Reality (AR)-Headset auf ein Standbild richten und beobachten, wie es vor Ihren Augen zum Leben erwacht. Dies ist mit der neuesten Augmented-Reality-Technologie möglich, z Apples ARKit oder Googles ARCore. Obwohl wir dies schon früher gesehen haben, beschränkte es sich in der Regel auf nur ein oder zwei ausgewählte Bilder – zum Beispiel als Werkzeug zum Animieren von Werbetafeln.

Empfohlene Videos

Forscher der University of Washington und Facebook haben etwas gebaut, das viel vielseitiger ist. Ihre neues „Photo Wake-Up“-Projekt wird stationäre Charaktere animieren beliebig Bild, was dazu führt, dass sie in Aktion treten und aus dem Hintergrund auf Sie zusprinten. Denn wer hat schon Zeit für langweilige alte Standbilder, wenn wir uns den letzten Tagen des Jahres 2018 nähern?

Die Forscher schreiben: „Die wichtigsten Beiträge dieser Arbeit sind [erstens] eine Anwendung zur Betrachtung und Animation von Menschen in einzelnen Fotos in 3D. [Zweitens] eine neuartige 2D-Verzerrungsmethode, um ein bewegliches Schablonenkörpermodell so zu verformen, dass es an die komplexe Silhouette der Person passt, um ein animierbares Netz zu erstellen. Und [drittens] eine Methode zur Behandlung partieller Selbstverschlüsse. Wir vergleichen mit modernsten Methoden und werten die Ergebnisse anhand von Humanstudien aus. Darüber hinaus präsentieren wir eine interaktive Schnittstelle, die es ermöglicht, die Person in 3D neu zu positionieren, und ein Augmented-Reality-Setup, bei dem die animierte 3D-Person aus dem Foto in die reale Welt auftauchen kann.“

Verwandt

  • Microsoft und Samsung könnten bei einem neuen AR-Headset zusammenarbeiten
  • Mit der neuen AR-App von Amazon können Sie mit all diesen Prime Day-Boxen Spaß haben
  • Möchten Sie Snoop Dogg in AR sehen? Sie müssen eine Flasche seines neuen Weins kaufen

Wie im Video oben zu sehen ist, wurde dieser Effekt erfolgreich auf Fotos, Postern und Kunstwerken demonstriert. Derzeit befindet sich die Forschung noch in einem relativ frühen Stadium, obwohl sie beeindruckend gut darin ist, menschliche Figuren auf breiter Front zu erkennen Dabei spielt es keine Rolle, ob es sich um modernistisch gemalte Figuren in einem Picasso-Gemälde oder solche aus einem Schwarz-Weiß-Gemälde handelt Foto.

In ihrer Arbeit schlagen die Forscher vor, dass diese Arbeit neue Möglichkeiten eröffnen könnte, Bilder zu „genießen und mit ihnen zu interagieren“. Wenn ähnliche Interaktionen beispielsweise darauf ausgeweitet werden könnten, fotografische Autos fahren zu lassen, Wolken zu bewegen und jede andere Anzahl von Möglichkeiten, könnte dies der Beginn von etwas sehr Aufregendem sein. So wie es aussieht, können wir uns durchaus vorstellen, dass es den Animatoren viel Zeit spart.

Der Artikel mit dem Titel „Photo Wake-Up: 3D-Charakteranimation aus einem einzigen Foto“ ist zum Online-Lesen verfügbar.

Empfehlungen der Redaktion

  • Das neue AR-Headset von Apple nutzt möglicherweise die Face-ID-Technologie, um Handgesten zu verfolgen
  • Neue Software wird 2D-Fotos zur Anzeige in holografische 3D-Bilder umwandeln
  • Mit dem neuen AR-Tool von Amazon können Sie einen Raum mit mehreren virtuellen Gegenständen füllen
  • Mit dem neuen 3D-Malwerkzeug von Snapchat werden Kritzeleien zu Augmented-Reality-Kunst
  • Interner iOS 13-Code gibt Aufschluss über das neue Apple AR-Headset

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.