Point-E: Neue KI kann 3D-Modelle aus Text erstellen

Künstliche Intelligenzen werden das Jahr 2023 dominieren und kurz bevor das laufende Jahr zu Ende geht, die OpenAI hat eine Veröffentlichung herausgebracht, die Künstlern helfen kann, die mit Kunst in der dritten Dimension arbeiten. DER Punkt schafft es, 3D-Modelle durch Eingeben von Text zu erstellen, was mehrere Phasen eines kreativen Prozesses beschleunigt.

Die Nutzung in der Praxis ist noch unklar, aber das Tool existiert und liegt nun bei der öffentlichen Veröffentlichung bei den Kreativprofis. Sehen Sie sich jetzt weitere Informationen an.

Point-E erstellt Cluster von Punkten in 3D-Modellen

Mit Unterstützung von a Grafikprozessor NVIDIA V100, die neue künstliche Intelligenz von OpenAI (gleicher Schöpfer von DALL-E und ChatGPT) funktioniert genauso wie „seine Verwandten“: Der Benutzer muss nur einen Befehl im Text eingeben, um das Projekt zu erhalten. Der vielleicht größte negative Punkt ist, dass Point-E wie in seiner ersten Phase immer noch keine festen Modelle erstellen kann, sondern eine Reihe von Punkten, die es schaffen, sich zu vereinen, um eine 3D-Form darzustellen.

Der Name kann erklärt werden: die Points bezieht sich auf die gruppierten Punkte und die „E“ spricht von Effizienz, denn laut OpenAI, künstliche Intelligenz ist schneller als die Tools, die derzeit zum Erstellen von 3D-Objekten verwendet werden.

Es ist wichtig, sich daran zu erinnern, dass Punktwolken einfacher zu synthetisieren sind, aber sie erfassen nicht die endgültige Form oder Textur eines Objekts. Alles ist nur eine Ansammlung von Punkten, die in 3D zu sehen sind. Eine Möglichkeit, dieses Problem zu umgehen, ist ein anderes Tool von Punkt-E, der die Punktmengen in Polygonnetze umwandeln kann.

Da es sich in der ersten Entwicklungsphase befindet, stellten die Profis fest, dass auch mit dieser Anpassung die Designs noch bestimmte Teile fehlen können, was zu unregelmäßigen Formen führt.

Duale Vorlagen zum Erstellen eines Projekts

Laut dem Artikel seines neuen Projekts, der OpenAI verwendet zwei Modelle, um das zu liefern, was vom Benutzer angefordert wurde. Bei der ersten geht es um das Konvertieren und Verstehen von Text, ähnlich wie bei DALL-E2 e stabile Diffusion, und kann getippte Befehle und visuelle Konzepte verstehen. Die zweite, die sich auf 3D-Modellierung konzentrierte, wurde mit einer Reihe von Bildern trainiert, die mit 3D-Objekten gepaart waren, um zu lernen, wie man effektiv zwischen den beiden übersetzt.

In der Praxis funktioniert es folgendermaßen: Wenn Sie einen Textbefehl erhalten, generiert das Textlesemodell ein gerendertes synthetisches Objekt, das dann an das 3D-Modellierungstool gesendet wird, damit die Punktwolke erstellt werden kann. .

Die Entwickler selbst behaupten, dass Point-E nicht perfekt ist und in einigen Tests hat die KI einige Textbefehle und die Projekterstellung nicht verstanden, was eine vom Benutzer erwartete Lieferung nicht zulässt. Aber die Entwickler weisen darauf hin, dass es den Entwicklungsprozess beschleunigen kann.

Obwohl unsere Methode bei dieser Bewertung schlechter abschneidet als die Techniken nach dem Stand der Technik, produziert sie Proben in einem kleinen Bruchteil der Zeit. Dies kann es für bestimmte Anwendungen praktischer machen oder die Entdeckung hochwertiger 3D-Objekte ermöglichen.

Wo kann KI eingesetzt werden?

Es kann noch zu früh sein, Verwendungen für die zu nennen Punkt-und, aber die OpenAI veranschaulicht, dass Punktwolkenprojekte bei der Herstellung von 3D-Produkten mit den erforderlichen Anpassungen verwendet werden können. Ein weiterer interessanter Faktor, wenn die KI weiter verbessert wird, liegt in der Erstellung von Spielen und Animationen. Noch ist es nicht möglich, künstliche Intelligenz in der Praxis einzusetzen, und die Entwickler haben vorerst nur angekündigt, dass es sie gibt.

Es ist wichtig, sich daran zu erinnern, dass die Punkt Es ist nicht die erste KI, die Text in 3D-Modelle umwandelt. DER Google veröffentlichte eine überarbeitete Version von Traumfelder, die den Namen nahm DreamFusion und erfordert keine vorherige Schulung, Generieren von 3D-Darstellungen von Objekten ohne 3D-Daten.

Viele Architekturbüros verwenden 3D-Objekte, um Projekte zu präsentieren, und neben Filmen und Serien für Fernsehen und Kino kann das Wachstum von Tools für künstliche Intelligenz in diesem Bereich ein interessantes Phänomen sein.

Eines der großen Probleme, die auftreten können, betrifft das Urheberrecht, da künstliche Intelligenz auf bestehenden Projekten basieren kann, um das zu liefern, was angefordert wurde. Aber zumindest vorerst ist dies ein Problem, das in einem zweiten Moment gelöst wird, da die OpenAI Es wurde nichts über das Urheberrecht erwähnt. Wir können nur die nächsten Kapitel sehen.

Woran hast du gedacht? Punkt? Sagen Sie es uns, Leute Kommentar!

Siehe auch

Kennen Sie die KI, die spricht? Verstehen Sie das ChatGPT-Phänomen

Mit Informationen: TechCrunch l OpenAI l InSmartz