Das neue KI-Modell von NVIDIA generiert schnell Objekte und Charaktere für virtuelle Welten

Versuchen Sie, mit einem neuen die Nadel aus dem Erstellen virtueller 3D-Welten herauszunehmen Modell Laut NVIDIA kann GET3D Charaktere, Gebäude, Fahrzeuge und andere Arten von Objekten in 3D generieren. Das Modell sollte auch in der Lage sein, Formen schnell zu erstellen. Das Unternehmen stellt fest, dass GET3D mit einer einzigen GPU etwa 20 Objekte pro Sekunde generieren kann.

Die Forscher trainierten das Modell mit synthetischen 2D-Bildern von 3D-Formen, die aus mehreren Winkeln aufgenommen wurden. NVIDIA sagt, dass es nur zwei Tage gedauert hat, um rund 1 Million Bilder mit A100 Tensor Core-GPUs an GET3D zu übermitteln.

Das Modell kann Objekte mit „High-Fidelity-Texturen und komplexen geometrischen Details“ erstellen, so Isha Salian von NVIDIA. . Die Formen, die GET3D herstellt, „sind wie ein dreieckiges Netz geformt, wie ein Pappmaché-Modell, das mit einem strukturierten Material bedeckt ist“, fügte Salian hinzu.

Benutzer sollten in der Lage sein, Objekte zur Bearbeitung schnell in Spiel-Engines, 3D-Modellierer und Film-Renderer zu importieren, da GET3D sie in unterstützten Formaten erstellt. Dies bedeutet, dass es für Entwickler viel einfacher sein könnte, dichte virtuelle Welten für Spiele und das Metaverse zu erstellen. NVIDIA nannte Robotik und Architektur als weitere Anwendungsfälle.

Das Unternehmen sagte, dass GET3D aus einem Trainingsdatensatz von Autobildern in der Lage war, Limousinen, Lastwagen, Rennwagen und Lieferwagen zu generieren. Es kann auch Füchse, Nashörner, Pferde und Bären produzieren, nachdem es an Tierbildern trainiert wurde. Wie zu erwarten, stellt NVIDIA fest, dass je größer und vielfältiger das Trainingsset in GET3D eingespeist wird, „desto vielfältiger und detaillierter die Ausgabe sein wird“.

Mithilfe eines weiteren KI-Tools von NVIDIA , ist es möglich, mehrere Stile auf ein Objekt mit textbasierten Eingabeaufforderungen anzuwenden. Sie können einem Auto ein verbranntes Aussehen verleihen, ein Modellhaus in ein Spukhaus verwandeln oder, wie ein Video zeigt, das die Technologie zeigt, Tigerstreifen auf jedes Tier auftragen.

Das NVIDIA-Forschungsteam, das GET3D entwickelt hat, glaubt, dass zukünftige Versionen mit realen Bildern statt mit synthetischen Daten trainiert werden könnten. Es kann auch möglich sein, das Modell gleichzeitig mit mehreren Arten von 3D-Formen zu trainieren, anstatt sich jeweils auf eine Kategorie von Objekten konzentrieren zu müssen.

Alle von Engadget empfohlenen Produkte werden von unserem Redaktionsteam unabhängig von unserer Muttergesellschaft ausgewählt. Einige unserer Geschichten enthalten Affiliate-Links. Wenn Sie etwas über einen dieser Links kaufen, erhalten wir möglicherweise eine Affiliate-Provision. Alle Preise sind zum Zeitpunkt der Veröffentlichung korrekt.

Leave a Comment