Was ist 3D Gaussian Splatting und wie es in ein 3D-Mesh konvertiert wird

Du hast 40 Fotos eines geschnitzten Holzstuhls aufgenommen und willst ihn bis Freitag in deinem Spiel haben. Traditionelle Photogrammetrie würde dir ein Netz liefern, aber allein die Nachbearbeitung kostet einen ganzen Tag. 3D-Gaußsches Splatting nimmt dieselben Fotos und rendert in Minuten eine fotorealistische 3D-Szene, die auf einer Standard-GPU aus jedem Blickwinkel betrachtet werden kann. Es ist die Technik hinter den meisten "Wow, das ist ein echter Ort in Echtzeit"-Demos, die du 2024, 2025 und 2026 gesehen hast. Dieser Leitfaden behandelt, was 3D-Gaußsches Splatting eigentlich ist, wie es sich im Vergleich zu NeRF und Photogrammetrie abschneidet, und den Teil, den die meisten Tutorials auslassen: Was du mit einem Splat machst, sobald du einen erstellt hast.

Was ist 3D Gaussian Splatting (eine Methode zur 3D-Darstellung)?

3D Gaussian Splatting ist ein Rendering-Verfahren, das aus einem Satz von 2D-Bildern eine fotorealistische 3D-Szene rekonstruiert. Anstatt ein Polygongitter zu erstellen, stellt es die Szene als Millionen winziger 3D-Gauß-Blobs dar, die jeweils über eigene Position, Größe, Rotation, Farbe und Transparenz verfügen. Beim Betrachten der Szene werden diese Blobs auf den Bildschirm projiziert (oder „gesplattet“) und miteinander überblendet. Aus dem richtigen Betrachtungsabstand wirken sie wie eine durchgehende, scharfe und fotorealistische Oberfläche.

Die Methode stammt aus einer SIGGRAPH-Studie von 2023, verfasst von Forschern des Inria und des Max-Planck-Instituts. Der Titel der Veröffentlichung, 3D Gaussian Splatting for Real-Time Radiance Field Rendering, verrät die beiden entscheidenden Aspekte: Es handelt sich um eine Radiance-Field-Technik wie NeRF, die jedoch, in Echtzeit rendert. Für die formale Definition ist Gaussian Splatting auf Wikipedia ein guter Ausgangspunkt, und die PlayCanvas Gaussian Splatting Dokumentation zeigt die Methode in einer Live-Engine in Aktion.

Wie Gauß'sches Splatting eine 3D-Szene repräsentiert

Jeder Gaussian wird durch eine 3D-Kovarianz (seine Form und Orientierung), einen Mittelpunkt, einen Opazitätswert sowie sphärische Harmonischen-Koeffizienten definiert, die ansichtsabhängige Farben speichern. Fügt man einige Millionen hinzu, erhält man ein volumetrisches Modell der Szene. Es gibt kein Mesh, keine UV-Karte und keine Texturdatei. Nur Punkte im Raum, die wissen, wie sie sich selbst zeichnen.

Warum 3D Gaussian Splatting in Echtzeit rendert

Der Trick ist die Rasterisierung, nicht das Ray Marching. Traditionelle NeRFs werten für jedes Pixel ein neuronales Netz aus. 3DGS sortiert die Gaußschen Verteilungen auf der GPU von vorne nach hinten und zeichnet sie wie Sprites. Deshalb erreicht ein trainiertes Splat-Modell auf einer einzelnen Consumer-GPU 30 bis über 100 Bilder pro Sekunde, während NeRF oft nur langsam läuft. Die ursprüngliche Veröffentlichung berichtete über ein Training mit etwa 30.000 Bildern in 30 bis 60 Minuten und anschließender Echtzeit-Ansichtssynthese.

3D Gaussian Splatting vs NeRF: Der entscheidende Unterschied

Beide Techniken rekonstruieren ein Radiance Field aus Bildern. Der Unterschied liegt darin, was sie erlernen und wie sie rendern.

3DGS vs. NeRF, Trainings- und Render-Geschwindigkeit

NeRF trainiert ein neuronales Netzwerk, um Farbe und Dichte an jedem 3D-Punkt vorherzusagen. Das ist sowohl im Training als auch beim Rendern langsam. 3D-Gaussian Splatting überspringt das Netzwerk beim Rendern vollständig. Sobald die Gauß-Funktionen optimiert sind, besteht das Rendering nur noch aus Sortieren und Mischen. Wenn Sie eine Live-Vorschau oder einen Web-Viewer benötigen, gewinnt 3DGS eindeutig.

3D-Gaussian-Splatting: Qualität und visuelle Artefakte

NeRF neigt dazu, feine Details zu glätten und kann scharfe Kanten verwischen. 3DGS behält scharfe Kanten und hochfrequente Bildinformationen, da es Farben direkter speichert. Man bekommt allerdings eigene Probleme: fleckige Artefakte, aufgeblähte Gaußsche Verteilungen im leeren Raum und unnatürliche Verzerrungen an den Rändern des erfassten Bereichs. Erfahrene Nutzer reduzieren diese, aber sie verschwinden nie vollständig.

Wenn NeRF besser ist als Gaussian Splatting

Die kontinuierliche Darstellung von NeRF handhabt extreme Blickwinkeländerungen sowie transparente oder unscharfe Volumina (Rauch, haarähnliche Strukturen) besser als diskrete Splats. Wenn Ihre Szene viele halbtransparente Geometrien enthält und keine Echtzeitwiedergabe erforderlich ist, kann eine NeRF-Variante dennoch ein saubereres Ergebnis liefern.

3D Gaussian Splatting vs Photogrammetrie: Womit sollten Sie Szenen erfassen

Dies ist die Gegenüberstellung, die Ihre Woche tatsächlich beeinflusst. Beide beginnen mit Fotos. Sie führen zu sehr unterschiedlichen Ergebnissen.

Mesh-Output vs. Gaussian Splatting Punktwolke

Photogrammetrie erzeugt ein texturiertes Mesh: Vertices, Flächen, UVs und einen Texturatlas, den Sie direkt in Unity oder Unreal importieren können. Gaussian Splatting erzeugt eine Punktwolke aus Gauß-Punkten. Das sieht fantastisch aus, ist aber kein Mesh. Es lässt sich nicht riggen, man kann es nicht einfach texturmäßig bemalen und ohne zusätzliche Schritte für Animationen verformen.

Bearbeiten und Animieren einer Gaußschen Splatting-Aufzeichnung

Ein Mesh aus der Photogrammetrie lässt sich in Blender wie jedes andere Modell bearbeiten. Ein Splat existiert in einem eigenen Format (typischerweise eine .ply- oder .splat-Datei). Mit dedizierten Editoren können Sie Splats zuschneiden, umfärben und komprimieren, doch sobald ein Charakter laufen oder eine Tür sich öffnen soll, widersteht das Splat. Für statische Umgebungen und Archivierungszwecke ist das in Ordnung. Für alles, was sich bewegt, müssen Sie eine Konvertierung planen.

Wie man ein 3D-Gaußsche Splatting anhand von Fotos erstellt

Die Steuerung des Aufnahmeprozesses beeinflusst Ihr Resultat stärker als das verwendete Gerät.

Fotos für 3D Gaussian Splatting erfassen

Umkreisen Sie Ihr Motiv vollständig. Überlappen Sie mindestens ein Drittel jedes Bildes mit dem vorherigen. Fotografieren Sie aus einer gleichbleibenden Höhe und denken Sie daran, nach oben und unten zu schauen, damit Ober- und Unterseite des Objekts abgedeckt sind. Flache, strukturlose Oberflächen (eine weiße Wand, ein klarer Himmel) bieten dem Optimierer keine Erkennungsmerkmale, fügen Sie daher Referenzpunkte hinzu oder wechseln Sie die Position.

Bildüberlagerung und Kreis-Ansatz für Gaußsches Splatten

Ein präziser 360°-Schwenk mit gleichmäßiger Überlappung schlägt eine große Menge unzusammenhängender Aufnahmen allemal. Halten Sie Ihr Telefon beim Umkreisen annähernd auf derselben Ebene, gehen Sie in normalem Tempo und verzichten Sie auf Zoom während der Aufnahme. Der Optimierer benötigt konsistente Skalierungsreferenzen, und eine schwankende Kamerahöhe ist der schnellste Weg zu einem verwackelten Splat.

Wählen Sie sich Ihr Werkzeug für Gaussian Splatting

Polycam Gaussian Splatting-Tool und Luma AI 3D-Erfassung wandeln beide Bildersätze oder Videos mit kaum Einrichtungsaufwand in Gaussian Splats um und laufen auf Ihrem Smartphone. Für eine kostenlose, lokale Option mit hoher Kontrolle bieten Postshot Gaussian Splatting Trainer und die ursprüngliche Inria-Codebasis die umfangreichsten Anpassungsmöglichkeiten.

Trainieren Sie und betrachten Sie Ihr Gauß-Splatting

Laden Sie die Bilder hoch, lassen Sie das Tool die Kamerapositionen schätzen und die 3D-Gaussians optimieren, und öffnen Sie dann das Ergebnis in dessen Viewer. Die meisten Tools exportieren eine Datei im .ply- oder .splat-Format, die Sie in einem Web-Viewer bereitstellen oder in eine Game-Engine importieren können. Rechnen Sie mit Trainingszeiten von wenigen Minuten (Smartphone-Apps) bis unter einer Stunde (Desktop, große Datensätze).

Export von .ply- und .splat-Dateien aus Ihrem Gaussian-Splatting-Tool

Das .ply-Format enthält die Gaußparameter (Position, Kovarianz, Farbe, Opazität) und wird von den meisten Viewern und Engine-Plugins unterstützt. Das .splat-Format ist eine leichtere, streaming-freundliche Variante für die Wiedergabe im Web. Im Jahr 2026 werden zwei weitere Formate relevant: .spz ist ein kompaktes, verlustbehaftet komprimiertes Splat-Format, das die Dateigröße für die Auslieferung drastisch reduziert, und die KHR_gaussian_splatting-Erweiterung der Khronos Group bringt Splats in den glTF-Standard für universelle Viewer-Unterstützung. Wählen Sie .ply für maximale Kompatibilität, .spz wenn die Größe entscheidend ist, und behalten Sie glTF im Auge, während sich der Formatstreit legt.

Vergleich von Gaussian Splatting-Software und Aufnahmetools

Keines dieser Tools erzeugt standardmäßig ein spielbereites Mesh. Dieses Defizit stellt das eigentliche Problem im Workflow dar, und hier bleiben die meisten „Splat“-Projekte stecken.

So verwenden Sie Gaussian Splats in Unity und Unreal Engine

Splat-Rendering in eine Echtzeit-Engine zu integrieren ist nicht mehr ungewöhnlich, aber die Unterstützung ist uneinheitlich.

Unterstützung für Gaussian Splatting in Unity

Unity bietet den ausgereiftesten Lösungsweg. Das offizielle Unity-Paket für Gaussian Splatting steht über die Cloud-Tools von Unity zur Verfügung und liest .ply- und .spz-Dateien direkt ein, wobei Compute-Shaders für die Sortierung auf der GPU und das Rendering verwendet werden. Ab 2026 ist dies der Produktionsstandard für statische Hintergründe und Betrachter.

Laden von .ply Splat-Dateien mit dem UnityGaussianSplatting-Plugin

Ziehen Sie Ihre .ply-Datei per Drag & Drop in das Projekt, weisen Sie sie der Splat Renderer Component zu, und das Plugin übernimmt die Sortierung und Zeichenreihenfolge auf der GPU. Beginnen Sie mit einigen Hunderttausend Gaussians für eine schnelle Plausibilitätsprüfung, bevor Sie eine Multi-Million-Gaussian-Aufnahme laden, die schwächere Hardware überlasten könnte.

Unreal Engine-Plugins für 3DGS

Unreal Engine bietet 2026 immer noch keine erstparteieigene Unterstützung für Gaussian Splatting, aber das Plugin-Ökosystem ist nun produktionsreif. Das Luma AI-Plugin (kostenlos auf Fab) ermöglicht Drag & Drop-Import von .ply- und .luma-Dateien mit fertigen Blueprint-Assets, und NanoGS (veröffentlicht im März 2026) fügt Nanite-artige LOD-Cluster, Culling (Ausblendung) und GPU-Sortierung für große Szenen hinzu. Detailverluste beim Import treten weiterhin auf, daher testen Sie Ihre spezifischen Gaussian Splats frühzeitig, bevor Sie sich für eine Produktionspipeline entscheiden.

Gaussian Splatting-Leistung auf Desktop und mobilen Geräten

Ein Splat mit ein paar Millionen Gauß-Verteilungen läuft flüssig auf einer Desktop-GPU. Derselbe Splat auf einem Telefon oder einem Quest-Headset ist eine andere Geschichte. Splat-Anzahl, Sichtweite und die Kosten für die Sortierung pro Frame summieren sich schnell. Planen Sie Komprimierung und Ausdünnung ein, und akzeptieren Sie, dass mobiles Echtzeit-3DGS immer noch eine Optimierungsaufgabe und kein Standard ist. Browser-Viewer verbessern sich bis 2026 dank nativer WebGPU-Compute-Shader, aber Desktop-Engines sind bei großen Szenen weiterhin führend.

Ist eine Konvertierung eines Gaussian-Splatting zu einem Mesh möglich?

Kurz gesagt: Ja, aber es ist nicht kostenlos.

Warum sich Gauß-Splats nicht sauber als Mesh exportieren lassen

Ein Splat ist eine Wolke aus fuzzyen Ellipsoiden, keine Oberfläche. Konvertierungswerkzeuge extrahieren die sichtbare Hülle der Gauss-Punkte als Mesh, aber das Ergebnis ist meist dicht, verrauscht und voller interner Artefakte. Es entsteht Geometrie, aber keine saubere Topologie und nichts, das man einem Rigger übergeben würde.

Einsatzbereiche der KI-Mesh-Generierung

Wenn Sie ein bearbeitbares, animierbares Objekt benötigen und kein aufgezeichnetes, ist ein Mesh-Generator der schnellere Weg. Für die Erstellung von 3D-Modellen aus Originalcharakteren ist ein KI-Generator einem Scanner stets überlegen. Triverse AI verwandelt einen Textprompt oder ein Referenzbild in ein sauberes, retopologisiertes 3D-Modell, das Sie direkt in Blender importieren können. Hier liegt der entscheidende Unterschied: 3DGS erfasst das, was vor der Kamera ist, während ein Generator das erschafft, was in Ihrem Kopf ist.

Generieren Sie originäre Assets mit Triverse AI KI

3D-Gauss-Splatting und KI-Mesh-Generierung lösen unterschiedliche Aspekte desselben Problems: ein 3D-Asset von der Idee bis zur Engine-Implementierung zu bringen.

Splats erfassen, Generatoren erzeugen

Verwenden Sie 3DGS, wenn Sie ein echtes Objekt oder einen Ort digitalisieren wollen. Nutzen Sie einen KI-Generator, wenn das Asset noch nicht existiert oder wenn Sie ein Mesh benötigen, das Sie bearbeiten, rignen und animieren können. Teams ohne Scan-Ausrüstung oder eine große Art-Department profitieren am meisten von dieser Aufteilung: Erfassen Sie Referenzen aus der echten Welt, generieren Sie die Original-Komponenten und fügen Sie diese in der Engine zusammen.

Wann Sie Triverse anstelle von 3DGS verwenden sollten

Wenn Ihr Ziel eine spielbereite Figur, ein stilisierter Gegenstand oder etwas ist, das sich bewegt, verzichten Sie auf den Splat. Triverse exportiert GLB- und OBJ-Dateien mit sauberer Topologie, die den Spiel-Spezifikationen entsprechen – etwas, das ein roher Splat ohne umfangreiche Konvertierung nie erreichen wird. Für einen tieferen Einblick zur Erhaltung einer sauberen Topologie lesen Sie unseren Leitfaden zu bewährten Methoden für saubere Topologie.

Entscheidungshilfe: 3DGS, Photogrammetrie, NeRF oder KI-Generierung

• Erfassen eines realen Ortes oder Gegenstands und schnelle, fotorealistische Wiedergabe: 3D-Gauß-Splatting.
• Sie benötigen ein texturiertes, bearbeitbares 3D-Mesh, das Sie animieren können: Photogrammetrie (reales Objekt) oder KI-Generierung (fiktives Objekt).
• Benötigt reibungslose Bildsynthese bei Nebel, Haaren oder Transparenz: NeRF.
• Benötigen Sie ein Asset, das es noch nicht gibt und das mit Rigging versehen werden kann: KI-basierte Mesh-Generierung.

Die meisten Produktionspipelines setzen letztendlich auf zwei davon, nicht nur auf eines. Das Erfassen realer Referenzen mit 3DGS und das Generieren neuer Teile mit einem Mesh-Werkzeug ist eine gängige, sinnvolle Arbeitsteilung.

Polygonales Mesh im Vergleich zu Gaussian-Splatting-Darstellung desselben Holzstuhls. Workflow: Von Fotos über Gaussian-Splatting-Tools bis zum Viewport in Unity oder Unreal. Photogrammetrie-Mesh im Vergleich zu Gaussian-Splatting-Darstellung im Vergleich zu KI-generiertem, bereinigtem Mesh.

Fazit

3D-Gaussian-Splatting ist der schnellste Weg, um Fotos in eine Echtzeit-fotorealistische 3D-Szene zu verwandeln, durch die man sich tatsächlich bewegen kann. Es schlägt NeRF bei der Geschwindigkeit und Photogrammetrie bei der Erfassungszeit, aber es liefert eine Punktwolke, kein Mesh. Das sollten Sie vorab wissen. Verwenden Sie es für statische Aufnahmen und Umgebungen, kombinieren Sie es mit Photogrammetrie oder KI-Tools zur 3D-Generierung wie Triverse AI, wenn Sie bearbeitbare Objekte benötigen, und Sie werden Ihre Zeit mit dem Erstellen verbringen, anstatt mit Dateiformatproblemen kämpfen.

Häufig gestellte Fragen zu 3D Gaussian Splatting

Was ist 3D Gaussian Splatting in einfachen Worten?

Ist 3D Gaussian Splatting besser als NeRF?

Kann ich einen Gaussian Splat in ein Mesh umwandeln?

Welches Dateiformat verwendet 3D Gaussian Splatting?

Wie viele Fotos benötige ich für einen Gaussian Splat?

Unterstützt Unity Gaussian Splatting?

Ist Gaussian Splatting gut für Spiele geeignet?