Nvidias A.I. und Ray Tracing macht Moonwalk-Video-Selfies auf dem Mond

Neben der Einführung von 10 neuen RTX Studio-Laptops für Entwickler bei SIGGRAPH kündigte Nvidia auch einige der Arbeiten an dass seine Forschungsteams in den Bereichen künstliche Intelligenz, erweiterte Realität und Computer gearbeitet haben Grafik. Zum 50. Jahrestag der Mondlandung von Apollo 11 zeigte Nvidia, wie die Raytracing-Technologie seiner RTX-Grafikkarte verwendet wird die Bilder optisch aufwerten vor 50 Jahren von der NASA aufgenommen. Bei SIGGRAPH gehen Nvidias Bemühungen zum Gedenken an Apollo 11 noch einen Schritt weiter und bieten Weltraumfans die Möglichkeit, sich in eine zu versetzen kurzer Videoclip, als wären sie die Astronauten Neil Armstrong und Buzz Aldrin, mithilfe von K.I. und die Leistungsfähigkeit von Raytracing zum Rendern dieser Videos Echtzeit.

„Wir nutzen künstliche Intelligenz, um eine Kamera auf Personen in Straßenkleidung auszurichten, um eine 3D-Posenschätzung durchführen zu können“, erklärte Rob Estes von Nvidia TKTK. „Wir wissen, wo sie sich im 3D-Raum befinden, und wir wissen, wie sich ihre Gliedmaßen bewegen, also zeichnen wir das mit

Den Moonwalk auf dem Moonwalk machen

Hollywood-Regisseure für visuelle Effekte machen seit Jahren etwas Ähnliches mit einem Greenscreen und Motion-Capture-Schauspielern in Anzügen mit Punkten, um die Bewegung der Gliedmaßen nachzubilden, aber Raytracing und A.I. Gehen Sie noch einen Schritt weiter, indem Sie den Bedarf an Spezialgeräten eliminieren Schauspieler. „Das könnte man überall machen, wo man jemanden filmen kann“, erläuterte Estes die Vorteile der KI-Unterstützung Raytracing in diesem Mondbeispiel. Im Wesentlichen können SIGGRAPH-Besucher eine kurze Videomontage von sich selbst in Aldrins und Armstrongs Raumanzug beim Mondspaziergang filmen, als wären sie im Rahmen der Apollo-11-Mission auf dem Mond.

„Wir werden ein Modell der Mondoberfläche und des Mondlanders haben und ihnen zeigen, was es ist.“ „Es wäre, als wären sie auf dem Mond“, sagte er, während alle Lichteffekte und Renderings durchgeführt wurden Echtzeit. „Das ist Spitzenforschung, die noch niemand zuvor gemacht hat. Sie durchkämmen K.I. und Raytracing auf eine Weise, die viele, viele praktische Vorteile hat.“ Diese Vorteile kommen nicht nur Hollywood zugute und Seine Teams für visuelle Effekte, aber auch Designer und Forscher, die versuchen, schwierige Probleme mit Forschungsschätzungen zu lösen, sagte Nvidia erweitert.

Foveated-Rendering mit Korrekturbrille

Nvidia möchte dafür sorgen, dass das Rendering für Augmented- und Virtual-Reality-Anwendungen realistischer und klarer erscheint, und setzt dazu seine innovative Rendering-Technologie ein. Das Forscherteam von Nvidia hat die Unterstützung für verschreibungspflichtige Brillengläser hinzugefügt – ein Novum in der Branche. Obwohl sich dies derzeit noch in einem frühen Forschungsstadium befindet, sieht Nvidia einen Tag vor, an dem Träger von Korrektionsbrillen keine separate Brille mehr von ihren Augmented-Reality-Geräten tragen müssen.

Nvidia arbeitet mit mehreren Arten von Displays, um das VR- oder AR-Display deckungsgleich mit der Korrektionsbrille, die Sie möglicherweise haben, bauen zu können. „Das ist eine große Sache“, sagte Estes. „Man konnte 20/20 noch nie sehen, weil es einfach an der Sehschärfe für diese Darstellungen mangelte.“

So wie Raytracing Videospielen lebensechte Kinoeffekte verleihen kann, so Foveated Durch das Rendern können AR-Szenen und Bilder durch Konservierung realistischer und mit besserer Auflösung erscheinen Grafikleistung. Anstatt die gesamte Szene zu rendern, ermöglicht Foveated Rendering den Erstellern, nur den mittleren Teil der Szene in der Höhe zu rendern Die Wiedergabetreue, auf die Ihre Augen normalerweise fokussieren, und die Randbereiche können mit weniger Details gerendert werden, um GPU-Leistung zu sparen Leistung.

„Deshalb arbeiten wir daran, sicherzustellen, dass wir verfolgen, wo sich Ihr Spiel befindet, und dies anwenden, damit Sie schneller werden Bildraten und bessere Grafiken bei der Umsetzung von Augmented Reality, oder dies könnte auch auf die virtuelle Realität angewendet werden“, sagte Estes.

GauGAN, die K.I. Künstler, wird freigelassen

In der Vergangenheit hat Nvidia gezeigt, wie es geht GauGAN Das Zeichenwerkzeug kann sogar die Kunstinteressierten unter uns zu Künstlern machen, indem es Ihnen ermöglicht, komplexe, Leben-Leben-Landschaften mit nur wenigen einfachen Strichen durch die Nutzung der Kraft des Künstlichen Intelligenz. Die von der KI gezeichneten Szenen wurden, wie Nvidia verriet, auch in einigen namhaften Hollywood-Filmen als Kulissen verwendet, wobei die Studios Elemente übereinander legten, um die Gesamtstimmung für den Clip festzulegen.

Anstatt K.I. Um Elemente einer Szene, wie einen Hund oder eine Katze, zu identifizieren, verwendet GauGAN, wie der Name schon sagt, ein generatives gegnerisches Netzwerk (GAN). Indem GauGAN durch das Zeichnen einer Horizontlinie angibt, wo sich der Himmel befindet und wo das Meer auf den Himmel trifft, beginnt er, die Szene damit zu „zeichnen“. Wolken und Wellen, und der Benutzer kann dieser Meereslandschaft Felsen und Meeresklippen hinzufügen, um die Szene mit geeigneten Schatten und Schatten zu versehen Reflexionen. Anstatt also Objekte in einem Bild zu identifizieren, hilft GAN dabei, das Bild mit einer realistischen Erstellung und Darstellung der Szene zu füllen, erklärte Nvidia.

Angesichts der Beliebtheit des Tools gab Nvidia bekannt, dass es den Zugang zu GauGAN für alle erweitern wird. Derzeit gibt es laut Estes keine Pläne, GauGAN zu monetarisieren, trotz seiner kreativen Arbeit in der Branche Filmindustrie, und dass das Unternehmen einfach nur die Freude genießt, die andere Menschen daran haben es benutzen.

Empfehlungen der Redaktion

• Nvidia stellt Portal: Prelude RTX vor, und Sie können es kostenlos spielen
• 5 erstaunliche KI-Funktionen in Photoshop, die Sie jetzt verwenden können
• Nvidias Supercomputer könnte eine neue Ära von ChatGPT einläuten
• 3 Gründe, warum Sie dennoch eine Nvidia-GPU statt AMD kaufen sollten
• Wenn Sie eine Nvidia-Grafikkarte haben, kann es sein, dass Ihre CPU gerade leidet

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.