Nvidia hat einen atemberaubenden neuen Bildersteller veröffentlicht. Aufgerufen GauGAN Die Software verwendet generative Adversarial Networks GANs, mit denen Benutzer grobe Skizzen in detaillierte, fast fotorealistische Landschaften verwandeln können.
SIEHE AUCH: WIRD AI-ART MENSCHEN ALS KÜNSTLER DER ZUKUNFT LIEFERN?
Die Demonstrationsvideos zeigen nur wenige Linien und Formkonturen, die sofort in filmische Bilder umgewandelt werden. GauGAN ist nur eine Demonstration von Nvidias Macht neuronale Netzwerkplattform es kommt noch viel mehr.
Virtuelle Welt wird reich real
Nvidia sagt, dass sie hoffen, ein Werkzeug zu entwickeln, mit dem jeder, von Künstlern über Architekten bis hin zu Filmregisseuren, die Möglichkeit erhält, qualitativ hochwertige Bilder zu erstellen. virtuelle Welten in nur wenigen Sekunden. Profis könnten Ideen prototypisieren und ihre imaginäre Realität schnell ändern.
„Es ist viel einfacher, mit einfachen Skizzen Brainstorming-Designs zu erstellen, und diese Technologie kann Skizzen in äußerst realistische Bilder umwandeln“, sagte Bryan Catanzaro, Vizepräsident für angewandte Deep-Learning-Forschung bei NVIDIA. GuaGAN, ein Wortspiel auf den Namen desDer berühmte impressionistische Maler Gauguin gibt seinen Benutzern drei Werkzeuge: einen Farbeimer, einen Stift und einen Bleistift.
Am unteren Bildschirmrand befindet sich eine Sammlung möglicher Objekte im Zusammenhang mit Landschaftsbildern. Wählen Sie das Wolkenobjekt aus, zeichnen Sie eine Linie auf dem Bildschirm, und die Software konvertiert diese in eine Wolke.
System stellt sicher, dass 'Kunst' immer einzigartig ist
Dies ist jedoch nicht nur ein Stempel, jede einzelne Linie erzeugt ein eindeutiges Wolkenbild. Der gleiche Vorgang gilt für andere Landschaftsobjekte. Wählen Sie das Baumobjekt aus, zeichnen Sie eine Linie, und es wird ein Baum gebildet, der oben knollig wirdBlätter produzieren.
Das System stellt sicher, dass auch dieselben Skizzen mit denselben Einstellungen unterschiedlich sind, indem Zufallszahlen eingebaut werden, die sicherstellen, dass die Software unterschiedliche Ergebnisse erzielt. Das Deep-Learning-Modell wird auf Millionen von Bildern trainiert und ist hyperflexibel. Ändern Sie ein Teichobjekt inSchnee und beobachte, wie dein Bild sofort die Jahreszeiten wechselt.
Netzwerke arbeiten zusammen, um sich ständig zu verbessern
"Es ist wie ein Malbuchbild, das beschreibt, wo ein Baum ist, wo die Sonne ist, wo der Himmel ist", sagte Catanzaro.
„Und dann kann das neuronale Netzwerk alle Details und Texturen sowie die Reflexionen, Schatten und Farben ausfüllen, basierend auf dem, was es über reale Bilder gelernt hat.“
Die GANs können solche überzeugenden Ergebnisse erzielen, weil sie kooperierende Netzwerkpaare verwenden, die als Generator und Diskriminator bekannt sind. Der Diskriminator wird auf reale Bilder trainiert und gibt dann dem Generator eine Rückmeldung über den Erfolg der erstellten Bilder bis zum Pixel.
Nvidia macht Software kostenlos
Das System ermöglicht es seinen Benutzern auch, Filter hinzuzufügen, um den resultierenden Bildern einen persönlicheren Stil zu verleihen. „Bei dieser Technologie werden nicht nur Teile anderer Bilder zusammengefügt oder Texturen ausgeschnitten und eingefügt“, sagte Catanzaro.
"Es synthetisiert tatsächlich neue Bilder, sehr ähnlich wie ein Künstler etwas zeichnen würde."
Die Demo ist sehr beeindruckend und erzeugt in nur wenigen Sekunden ziemlich realistische Bilder. Bei genauer Betrachtung gibt es jedoch Lücken zwischen Objekten und einer kleinen Linie, an der sie sich berühren.
Nvidia sagt, dass sie daran arbeiten, dies zu verbessern. Derzeit scheint es nicht geplant zu sein, die Software kommerziell zu starten, aber Nvidia hofft, eine Version kostenlos für alle verfügbar zu machen.
Die Forschung im Zusammenhang mit dem Bau von GuaGAN wurde als mündliche Präsentation auf der CVPR-Konferenz im Juni angenommen.