UniK3D: Universelle Monokulare 3D-Schätzung für Kameras

UniK3D revolutioniert die monokulare 3D-Rekonstruktion, indem es präzise metrische 3D-Szenen aus einzelnen Bildern schätzt, unabhängig vom Kameratyp. Im Gegensatz zu früheren Methoden, die auf vereinfachten Annahmen beruhten, prognostiziert UniK3D direkt 3D-Punkte ohne zusätzliche Informationen. Die Hauptinnovation liegt in einer sphärischen 3D-Darstellung und einer neuartigen Kameradarstellung, die die Grenzen traditioneller Ansätze in Weitwinkel- und Panoramaeinstellungen überwindet. Eine Zero-Shot-Evaluierung an 13 verschiedenen Datensätzen zeigt Spitzenergebnisse bei 3D-, Tiefen- und Kamerametriken, insbesondere in herausfordernden Umgebungen mit großem Sichtfeld. Code und Modelle sind auf GitHub verfügbar.