GauGAN2 ist ein Tool zum Erstellen von KI-generierten fotorealistischen Landschaften. GauGAN2 wurde von NVIDIA entwickelt und ist als Webdemo verfügbar. Mit GauGAN2 können Sie das Bild beliebig optimieren, indem Sie eine Mischung aus Skizzieren und Texteingabe verwenden, um das KI-System zu steuern.
Mit etwas Zeit können Sie das Bild verfeinern, indem Sie Details hinzufügen oder entfernen, bis es genau richtig ist. Die Bilder, die es produzieren kann, sehen oft realistisch aus, aber ein falscher Strich und die Bilder können anfangen, wie Fantasy-Kunstwerke und nicht wie echte Landschaften auszusehen.
Hier ist, was Sie über GauGAN2 von NVIDIA wissen müssen.
Was ist GauGAN2 von NVIDIA?
GauGAN2 ist ein KI-Kunstgenerator mit einem einzigartigen Bearbeitungsfenster. Entwickelt von der Forschungsabteilung von NVIDIA, dem gleichen Unternehmen, das GPUs herstellt, ist es für jedermann über eine Webdemo verfügbar.
Es ist in gewisser Weise ähnlich mit Dall-E 2, ein KI-Text-zu-Bild-Generator, bei dem Sie Sätze wie „Sonnenuntergang über der Wüste“ eingeben können und das KI-System ein Bild basierend auf dieser Beschreibung erstellt. Das ist jedoch nicht alles, was Sie mit GauGAN2 tun können; Es gibt mehrere Möglichkeiten, das Bild weiter zu bearbeiten.
Eine Möglichkeit besteht darin, die Segmentierungskarte zu verwenden, um einen Umriss von Objekten im Bild zu sehen. Mithilfe dieser Informationen können Sie die Form von Dingen wie einer Bergkette ändern, indem Sie ihre Grenzen neu zeichnen oder Elemente vollständig löschen.
Sie können das Buntstift-Werkzeug auch verwenden, um beispielsweise einen Kreis zu zeichnen, der als Sonne gerendert werden könnte. Dasselbe gilt für das Zeichnen einiger Gipfel im Hintergrund, die zu einer Bergkette werden können, insbesondere wenn Sie sie mit einer Texteingabe kombinieren, die die Szene beschreibt.
Nachdem Sie GauGAN2 von NVIDIA ausprobiert haben, möchten Sie vielleicht mehr darüber erfahren wie man die Canvas-App von NVIDIA verwendet, das auf der gleichen Technologie basiert. Es ist eine kostenlose App, die sich an Künstler und Kreative richtet, funktioniert jedoch nur mit einer der RTX-GPUs von NVIDIA.
Wie funktioniert GauGAN2?
Hinter den Kulissen wurde GauGAN2 mithilfe von Generative Adversarial Networks (GAN) erstellt. Tatsächlich ist sein Name eine Anspielung auf den französischen postimpressionistischen Künstler Paul Gauguin und GANs.
Der Grund, warum es Bilder erzeugen kann, die überzeugend wie echte Landschaften aussehen, liegt darin, dass es während seiner Trainingszeit mit 10 Millionen hochwertigen Landschaftsbildern gefüttert wurde. Die zum Trainieren des Modells erforderliche Rechenleistung stammte vom Supercomputer NVIDIA Selene, einem der leistungsstärksten Supercomputer der Welt.
GANs finden Verwendung in vielen Anwendungen, einschließlich vieler KI-Text-to-Art-Generatoren. Der Hauptunterschied zu GauGAN2 ist die Möglichkeit, das KI-generierte Bild in einem speziellen Editor zu ändern, indem Sie Werkzeuge wie Stift, Füllung und Pinsel verwenden, um Änderungen vorzunehmen.
Die Benutzeroberfläche ist minimal, aber nicht gerade benutzerfreundlich, und ihr Retro-Look erinnert Sie vielleicht an die frühen Tage von Microsoft Paint, im Gegensatz zu modernster Software. Wenn die Steuerelemente zunächst nicht offensichtlich erscheinen, können Sie ein kurzes Tutorial ausführen oder sich eine Video-Komplettlösung ansehen. Klicken Sie einfach auf die Schaltflächen in der oberen rechten Ecke der Seite.
Welche Kunst kann GauGAN2 produzieren?
Das Ziel von GauGAN2 ist es, fotorealistische Bilder von Landschaften wie Bergen, Seen und Stränden zu erstellen.
Es gibt eine Bibliothek mit Beschriftungen, aus der Sie beim Skizzieren auswählen können, um die Skizzeneingabe weiter zu markieren, damit der KI-Generator ein geeignetes Bild rendern kann. Dazu gehören Dinge wie Nebel, Hügel, Stein, Schnee und Wasser, um nur einige zu nennen.
Es ist jedoch nicht schwer, dass etwas schief geht, und es ist genauso wahrscheinlich, dass Sie absurde und surreale Bilder produzieren. Nehmen Sie einfach das Stiftwerkzeug und zeichnen Sie ein paar seltsame Formen, und GauGAN spuckt etwas aus, das eher wie ein experimentelles Kunstwerk aussieht als irgendetwas Erkennbares.
Auch die Eingabe unsinniger Phrasen in das Textfeld kann zu merkwürdigen Ergebnissen führen. Manchmal müssen Sie nicht einmal so weit gehen; Einfach nach einer Berglandschaft zu fragen, erzeugte etwas, das wie eine seltsame Kombination aus Schnee und Fell aussieht.
In jedem Fall könnten einige Künstler ein solches Werkzeug nützlich finden. Es kann verwendet werden, um den Storyboarding-Prozess zu beschleunigen oder um schnell Konzeptzeichnungen für ein Spiel oder Video zu erstellen.
Diese Demo ist zwar weit davon entfernt, ein ausgefeiltes, gebrauchsfertiges Produkt zu sein, zeigt jedoch einiges an interessantem Potenzial.
GauGAN2: Ein hybrider KI-Kunstgenerator
GauGAN2 schließt sich der Sammlung von KI-Bildgeneratoren an, die Text in Bilder umwandeln. Im Gegensatz zu anderen Anwendungen können Sie das Bild jedoch schrittweise bearbeiten, indem Sie Skizzen und Text als Eingabe verwenden und das KI-Bild nach Ihren Wünschen optimieren.
Bei richtiger Anwendung kann GauGAN2 ziemlich überzeugende fotorealistische Bilder der Natur erzeugen, die für Künstler nützlich sein könnten, die ein Storyboard füllen oder schnell Konzeptzeichnungen erstellen müssen. Allzu leicht können die Dinge jedoch bizarr werden, und ein paar verirrte Stiftstriche können zu interessanten Ergebnissen führen.