Die Nvidia Smart Paintbrush-App verwandelt Kritzeleien in fotorealistische Bilder

Nvidia GauGAN-Forscherfoto
NVIDIA

Eine neue Zeichen-App mit erweiterten Deep-Learning-Funktionen könnte Ihre einfachen Skizzen und Kritzeleien bald in brillante und realistische Kunstwerke verwandeln.

Nvidia kürzlich angekündigt die Entwicklung von GauGAN, einer intelligenten Zeichen-App, die a tiefes Lernen Modell zur Erstellung fotorealistischer Versionen einfacher Zeichnungen, die von menschlichen Künstlern erstellt wurden. Der Name der App, GauGAN, bezieht sich sowohl auf den französischen postimpressionistischen Maler Paul Gauguin als auch auf die Verwendung der Generative Adversarial Networks (GANs) durch die App zur Entwicklung ihrer realistischen Bilder.

Empfohlene Videos

Wie funktioniert GauGAN? Laut Nvidias Ankündigung ist die App wie ein „intelligenter Pinsel“, der die Details Ihrer Zeichnung ausfüllt (sogenannte „Segmentierungskarte“). Im Wesentlichen geben Sie den Überblick über das, was Sie wollen, und beschriften jedes Segment und geben vor, was es sein soll. Von da an übernimmt GauGAN und ergänzt die zusätzlichen Details, um Ihre Zeichnungen realistischer zu machen:

Verwandt

  • Nvidia verzichtet auf die RTX 4070 und wendet sich günstigeren Optionen zu
  • Nvidia hat möglicherweise eine weitere Monster-GPU in Arbeit, und der Preis könnte unverschämt hoch sein
  • Der Entwickler sagt, dass es Ihren AMD 6800 XT in einen Nvidia 3090 Ti verwandeln kann

„Anhand einer Million Bildern trainiert, füllt das Deep-Learning-Modell dann die Landschaft mit atemberaubenden Bildern aus Ergebnisse: Zeichnen Sie einen Teich ein, und in der Nähe befindliche Elemente wie Bäume und Felsen werden als Reflexionen im Teich angezeigt Wasser. Tauschen Sie eine Segmentbezeichnung von „Gras“ in „Schnee“ aus, und das gesamte Bild verwandelt sich in eine Winterszene mit einem ehemals belaubten Baum, der kahl wird.“

Verwandeln Sie Skizzen in fotorealistische Meisterwerke

Die in GauGAN verwendeten GANs sind im Wesentlichen eine Partnerschaft zwischen zwei Netzwerken, einem Generator und einem Diskriminator. Im Rahmen dieser Partnerschaft entwickelt ein Generator eine Reihe möglicher Bilder und den Diskriminator fungiert als eine Art Editor, der dem Generator beibringt, „wie er den Realismus seiner Synthese verbessern kann“. Bilder.“

Es ist auch erwähnenswert, dass GauGAN zwar sein umfangreiches Wissen über andere Bilder zum Erstellen nutzt Diese Zeichnungen gelten immer noch als Originalwerke, da die App neue generiert Bilder.

Nvidias neue Zeichen-App beschränkt sich nicht nur auf Naturszenen oder Landschaften, sondern kann auch Gebäude, Straßen oder sogar Menschen hinzufügen. GauGAN ermöglicht Künstlern auch das Hinzufügen von Stilfiltern. Zu diesen Filtern gehört die Nachahmung des Stils eines bestimmten Künstlers oder die Anpassung der Bildbeleuchtung von einer Tag- an eine Nachtszene.

Es ist unklar, ob GauGAN jemals für den Verbrauchergebrauch freigegeben wird, aber es wird erwartet, dass es ein besonders hilfreiches Werkzeug für Architekten, Stadtplaner und sogar Spieleentwickler sein wird.

Empfehlungen der Redaktion

  • Nvidias Friedensangebot funktioniert nicht
  • Nvidias neues Guardrails-Tool behebt das größte Problem bei KI-Chatbots
  • Nvidia arbeitet möglicherweise an einer riesigen Quad-Slot-GPU
  • Wie Nvidias DLSS 3 funktioniert (und warum AMD FSR vorerst nicht aufholen kann)
  • AMDs neues Tool vergleicht seine GPUs mit denen von Nvidia, aber es gibt einen Haken

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.