Das umfangreiche Angebot generativer KI-Tools von OpenAI wächst weiter.
Forschungs- und Einsatzunternehmen für künstliche Intelligenz (KI) wie OpenAI veröffentlichen kontinuierlich Funktionen zum Wohle der Menschheit. Zusätzlich zu ChatGPT, DALL-E, Point-E und anderen erfolgreichen Tools hat OpenAI mit Shap-E ein neues innovatives Modell veröffentlicht.
Was ist Shap-E von OpenAI und was kann es für Sie tun?
Was ist OpenAIs Shap-E?
Im Mai 2023 veröffentlichten Alex Nichol und Heewon Jun, OpenAI-Forscher und Mitwirkende, eine Papier zur Ankündigung von Shap-E, die neueste Innovation des Unternehmens. Shap-E ist ein neues Tool, das auf einem riesigen Datensatz gepaarter 3D-Bilder und -Texte trainiert wird und 3D-Modelle aus Text oder Bildern generieren kann. Das ist vergleichbar mit DALL-E, das 2D-Bilder aus Text erstellen kann, aber Shap-E produziert 3D-Assets.
Shap-E wird auf einem bedingten Diffusionsmodell und 3D-Asset-Mapping trainiert. Durch die Zuordnung von 3D-Assets lernt Shap-E, Text oder Bilder mit entsprechenden 3D-Modellen aus einem großen Datensatz vorhandener 3D-Objekte zu verknüpfen. Ein bedingtes Diffusionsmodell ist ein generatives Modell, das von einer verrauschten Version der Zielausgabe ausgeht und diese schrittweise verfeinert, indem Rauschen entfernt und Details hinzugefügt werden.
Durch die Kombination dieser beiden Komponenten kann Shap-E realistische und vielfältige 3D-Modelle generieren, die zur gegebenen Text- oder Bildeingabe passen und aus verschiedenen Blickwinkeln und Lichtverhältnissen betrachtet werden können.
Wie Sie Shap-E von OpenAI nutzen können
Shap-E wurde nicht wie andere OpenAI-Tools veröffentlicht, aber sein Modellgewicht, sein Inferenzcode und seine Beispiele stehen auf der Website zum Download bereit Shap-E GitHub Buchseite.
Sie können den Shap-E-Code kostenlos herunterladen und Installieren Sie es mit dem Python-Befehl pip auf deinem Computer. Sie benötigen außerdem eine NVIDIA-GPU und eine Hochleistungs-CPU, da Shap-E sehr ressourcenintensiv ist.
Öffnen Sie nach der Installation die 3D-Bilder, die Sie in Microsoft Paint 3D generieren. Ebenso können Sie Konvertieren Sie die Bilder in STL-Dateien wenn Sie sie mit 3D-Druckern drucken möchten.
Auf der Shap-E GitHub-Seite können Sie auch Probleme melden und Lösungen für Probleme finden, die bereits von anderen angesprochen wurden.
Was Sie mit Shap-E von OpenAI tun können
Mit Shap-E können Sie komplexe Ideen mithilfe einer visuellen Darstellung von Ideen beschreiben. Die Einsatzmöglichkeiten dieser Technologie sind grenzenlos, insbesondere da visuelle Darstellungen in der Regel weitaus weitreichendere Effekte haben als Texte.
Als Architekt können Sie mit Shap-E 3D-Modelle von Gebäuden und Bauwerken auf der Grundlage schriftlicher Beschreibungen erstellen. Sie können die Abmessungen, Materialien, Farben und Stile der Strukturen mit einfachen Sätzen angeben. Sie können es beispielsweise mit „Erstellen Sie einen Wolkenkratzer mit 60 Stockwerken und Glasbalustraden“ auffordern und die Ergebnisse zur weiteren Bearbeitung in eine andere Software exportieren, wenn Ihnen die Ergebnisse gefallen.
Gamer und Animationskünstler können virtuelle Umgebungen und visuelle Erlebnisse verbessern, indem sie detaillierte 3D-Objekte und Charaktere erstellen. Im Ingenieurwesen können Sie Komponenten, Spezifikationen und Funktionen von Maschinen und Geräten beschreiben und die Ergebnisse in 3D-Modellen erhalten, bevor Sie physische Prototypen erstellen.
Darüber hinaus kann Shap-E sogar in Bereichen wie dem Bildungswesen Pädagogen dabei helfen, ihren Schülern komplexe und abstrakte Ideen in Fächern wie Biologie, Geometrie und Physik zu vermitteln.
Obwohl Shap-E noch in Arbeit ist, ist es OpenAI einen Schritt voraus PUNKT-E, das 3D-Punktwolken basierend auf Texteingaben erstellt. Die Punktwolken sind in ihrer Ausdruckskraft und Auflösung begrenzt und erzeugen oft verschwommene oder unvollständige Formen.
Generieren Sie 3D-Modelle mit Shap-E von OpenAI
Shap-E ist eine beeindruckende Demonstration der Leistungsfähigkeit der KI, 3D-Inhalte aus natürlicher Sprache oder Bildern zu erstellen. Damit können Sie 3D-Objekte für Computerspiele, interaktive VR-Erlebnisse, Prototypen und andere Zwecke erstellen. Obwohl es keine Garantien hinsichtlich der Ausgabequalität gibt, bietet Ihnen das KI-Modell eine schnelle und effiziente Möglichkeit, ein 3D-Modell von allem zu erstellen.
Darüber hinaus ist dieses KI-Modell ein wichtiger Beitrag im Deep-Learning-Bereich und wird wahrscheinlich zu zukünftigen fortschrittlichen Innovationen und Kreationen führen.
