NVIDIA Meshtron: Hochgenaue 3D-Mesh-Generierung im großen Maßstab

Forscher von NVIDIA haben Meshtron entwickelt, ein neuartiges Modell, das hochqualitative 3D-Meshes in noch nie dagewesenem Umfang und mit hoher Genauigkeit generiert. Es verwendet eine autoregressive Architektur und Sliding-Window-Attention, wobei Meshes als Token-Sequenz dargestellt und eine Hourglass-Transformer-Architektur eingesetzt wird, um die Skalierbarkeits- und Effizienzprobleme bestehender Methoden bei der Generierung komplexer 3D-Modelle effektiv zu lösen. Meshtron erzeugt Meshes mit kunstähnlichen Details, bietet hohe Kontrollierbarkeit durch Eingaben wie Punktwolken, Flächenzahl und Kreativität und ebnet den Weg für realistischere 3D-Asset-Generierung in Animation, Gaming und virtuellen Umgebungen.