Die Khronos Group, ein Konsortium für offene Grafikstandards, treibt die Integration einer innovativen 3D-Technologie voran. Mit einer neuen Erweiterung soll die Methode des 3D Gaussian Splatting in glTF, dem weltweit führenden Format für 3D-Assets, standardisiert werden. Dieser Schritt ist entscheidend, denn er schafft eine offene und einheitliche Grundlage für eine Technik, die fotorealistische 3D-Darstellungen in Echtzeit ermöglicht und somit die Fragmentierung des Marktes verhindert.
Die als KHR_gaussian_splatting bezeichnete Erweiterung befindet sich derzeit im Status eines „Release Candidate“. Das bedeutet, die Industrie kann Feedback geben, bevor die Spezifikation final ratifiziert wird. Dadurch stellt das Konsortium sicher, dass der neue Standard den praktischen Anforderungen von Entwicklern und Anwendern gerecht wird.
Wie 3D Gaussian Splatting funktioniert
Gaussian Splatting ist eine moderne Technik zur Darstellung von sogenannten Radianzfeldern (Radiance Fields), die aus mehreren zweidimensionalen Bildern ein fotorealistisches 3D-Objekt oder eine Szene erzeugen. Der Prozess beginnt mit Fotos oder Videos, aus denen eine anfängliche, eher dünn besetzte Punktwolke im dreidimensionalen Raum erstellt wird. Jeder einzelne Punkt in dieser Wolke ist ein „Gaussian Splat“.
Ein solcher Splat besitzt verschiedene Eigenschaften wie Position, Skalierung, Rotation, Farbe und Deckkraft (Opazität). Anschließend optimiert ein maschineller Lernprozess diese Punkte so, dass sie die ursprünglichen Bilder aus jeder Perspektive möglichst exakt nachbilden. Für die Darstellung in Echtzeit werden diese optimierten Splats dann mittels Rasterisierung, einem gängigen Verfahren in der Computergrafik, auf eine 2D-Fläche projiziert, was flüssige und reaktive Kamerafahrten erlaubt.
Die Vorteile der neuen Rendering-Technik
Die Methode des Gaussian Splatting bietet im Vergleich zu traditionellen 3D-Darstellungen auf Basis von Polygonnetzen oder reinen Punktwolken erhebliche Vorteile. Diese machen sie besonders attraktiv für anspruchsvolle Visualisierungsaufgaben in Echtzeit.
- Effizienz: Die Modelle lassen sich schnell trainieren und erreichen hohe Bildwiederholraten, was für interaktive Anwendungen unerlässlich ist.
- Skalierbarkeit: Die Technik skaliert hervorragend von einzelnen kleinen Objekten bis hin zu komplexen städtischen Umgebungen oder weitläufigen Landschaften.
- Realismus: Sie eignet sich besonders gut für die Erfassung von komplexen Oberflächen wie Vegetation, spiegelnden oder durchscheinenden Materialien, die mit herkömmlichen Methoden nur schwer darstellbar sind.
- Einfache Datenerfassung: Die benötigten Bilddaten können schnell vor Ort mit handelsüblichen Kameras, Drohnen oder sogar Mobilgeräten erfasst werden.
Anwendungsbereiche: Von digitalen Zwillingen bis zu Medien
Aufgrund dieser Eigenschaften wird Gaussian Splatting zunehmend für eine Vielzahl von Anwendungen relevant. Die Technologie findet bereits heute in vielen Bereichen Einsatz und ihr Potenzial ist bei Weitem noch nicht ausgeschöpft. Ihre Vielseitigkeit eröffnet neue Möglichkeiten für zahlreiche Branchen.
Zu den wichtigsten Einsatzgebieten gehören:
- Digitale Zwillinge und Kartierung: Erstellung hochdetaillierter Modelle ganzer Städte oder Industrieanlagen für Planung und Überwachung.
- Infrastruktur und Simulation: Präzise Erfassung von Bauwerken oder Gelände zur Überwachung des Zustands und für realistische Simulationen.
- Medien und Unterhaltung: Fotojournalismus und Filmproduktion profitieren von der Möglichkeit, reale Szenen schnell in immersive 3D-Umgebungen zu überführen.
- Kulturerbe: Digitale Archivierung von historischen Stätten oder Artefakten in fotorealistischer Qualität.
- Robotik: Training von Robotern in simulierten, aber realistischen Umgebungen.
Experten gehen außerdem davon aus, dass die Technologie bald auch die 3D-Erfassung für soziale Medien revolutionieren könnte, da sie eine einfache und schnelle Erstellung von 3D-Inhalten ermöglicht.
Warum eine Standardisierung für 3D Gaussian Splatting in glTF entscheidend ist
Die rasante Entwicklung und wachsende Beliebtheit von Gaussian Splatting birgt ohne einen einheitlichen Standard die Gefahr der Fragmentierung. Verschiedene Unternehmen könnten eigene, inkompatible Formate entwickeln, was den Austausch und die Weiterverarbeitung von Daten erheblich erschweren würde. Deshalb hat das Metaverse Standards Forum bereits Anfang 2025 die Notwendigkeit einer Standardisierung diskutiert.
Die Community erkannte schnell, dass eine Integration in das etablierte glTF-Format der beste Weg wäre, um Interoperabilität sicherzustellen. Ein zentrales Ziel ist dabei, Gaussian Splats nahtlos in bestehende Geodaten-Ökosysteme zu integrieren. Dort müssen sie oft zusammen mit anderen Datentypen wie Polygonnetzen, Geländedaten oder Sensordaten in einem gemeinsamen Koordinatensystem existieren. Die Khronos Group reagierte auf diesen Bedarf mit der Entwicklung der nun vorgestellten Erweiterung.
Die Erweiterung KHR_gaussian_splatting im Detail
Die Erweiterung `KHR_gaussian_splatting` fügt dem glTF-2.0-Standard eine neue Art von Geometriedaten hinzu. Sie ermöglicht die Speicherung aller relevanten Informationen direkt in der glTF-Datei, während die Kompatibilität mit bestehenden Werkzeugen und Arbeitsabläufen erhalten bleibt.
Wesentliche Merkmale der Erweiterung sind:
- Vollständige Datenspeicherung: Alle Attribute der Splats, wie Position, Orientierung, Skalierung, Farbe und Deckkraft, werden standardisiert abgelegt.
- Nahtlose Integration: Die Splat-Daten können gemeinsam mit traditionellen Polygonnetzen, Kameras und Animationen in einer einzigen glTF-Datei verwendet werden.
- Abwärtskompatibilität: Ein intelligenter Fallback-Mechanismus sorgt dafür, dass Programme ohne Unterstützung für die Erweiterung die Daten als einfache Punktwolke anzeigen können.
- Zukunftssicherheit: Die Spezifikation ist bewusst algorithmus-unabhängig und erweiterbar gestaltet. Zukünftige Entwicklungen wie neue Kompressionsverfahren oder Darstellungsmethoden können daher einfach integriert werden.
Breite Unterstützung aus der Industrie
Die Entwicklung der glTF-Erweiterung wird von führenden Unternehmen der Branche unterstützt, darunter Autodesk, Cesium, Esri, Huawei und Nvidia. Dies signalisiert ein starkes Interesse an einem einheitlichen Standard. Erste Implementierungen in Softwarelösungen wie CesiumJS, Esri ArcGIS und Scaniverse sind bereits in Arbeit, um die Erweiterung direkt nach ihrer finalen Verabschiedung zu nutzen.
Die Khronos Group arbeitet zudem eng mit anderen Standardisierungsgremien wie der Alliance for OpenUSD zusammen, um die Kompatibilität zwischen verschiedenen Ökosystemen sicherzustellen. Die finale Ratifizierung von KHR_gaussian_splatting wird für das zweite Quartal 2026 erwartet und dürfte der Verbreitung dieser vielversprechenden 3D-Technologie einen erheblichen Schub verleihen.
Artikelempfehlung: Digitalisierte Instandhaltung: So gelingt sie bei SE Tylose
