Splat Labs
Back to Blog
Article

KI-Objekteinfügung: VFX zu 3D-Gaussian-Splats hinzufügen

Fügen Sie VFX, CGI und 3D-Objekte in reale Gaussian-Splat-Scans im genauen Maßstab mit einem KI-Textbefehl ein. Testen Sie Splat Labs kostenlos.

Splat Labs TeamFebruary 23, 20266 Minuten Lesezeit
KI-Objekteinfügung: VFX zu 3D-Gaussian-Splats hinzufügen

Das Drehbuch sagt, das Monster ist 90 Meter groß. Es überragt die Skyline am Shibuya Crossing in Tokio — der meistgefilmten Kreuzung der Welt. Der Kameramann muss wissen: Von der Kameraposition auf Straßenebene — welches Objektiv lässt es bedrohlich wirken? Wie viel des Bildes füllt es von einem 24-mm-Weitwinkel versus einem 135-mm-Teleobjektiv? Wo platziert man die Schauspieler, damit die Sichtlinie in der Kamera stimmt — für eine Kreatur, die erst acht Monate in der Postproduktion entstehen wird?

Traditionell lautet die Antwort: Ein Previsualisierungsstudio beauftragen. Sie bauen eine grobe 3D-Version der Kreuzung aus Google Street View und Referenzfotos. Ihr VFX-Team modelliert eine Proxy-Kreatur. Ein Previsualisierungsleiter setzt alles in Maya oder Unreal zusammen. Wochen später bekommen Sie etwas Nützliches — aber es ist losgelöst von der physischen Realität des tatsächlichen Drehortes.

Wir haben einen anderen Ansatz versucht. Wir haben Shibuya Crossing per Drohne gescannt, den Gaussian Splat auf Splat Labs hochgeladen und sechs Wörter eingegeben.

„Füge einen riesigen Godzilla hinzu, der über den Gebäuden im Hintergrund aufragt."


Das Ergebnis

Eine 90 Meter große Kreatur, im realen Maßstab in ein KI-Bild von Shibuya Crossing eingefügt — aus dem 3D-Gaussian-Splat. Navigieren Sie zu jeder Kameraposition im Scan und generieren Sie ein neues Bild — planen Sie Objektivauswahl und Aufstellung, bevor jemand am Set erscheint.

Das ist ein KI-generiertes fotorealistisches Bild, das aus einem bestimmten Blickwinkel innerhalb des 3D-Gaussian-Splats erzeugt wurde. Navigieren Sie zu jeder Position im originalen 3D-Modell und generieren Sie ein neues Bild — überprüfen Sie, wie die Kreatur von jedem gewünschten Kamerawinkel wirkt. Ein Kameramann könnte am Hachiko-Ausgang des Bahnhofs Shibuya stehen, den 3D-Scan auf einem iPad öffnen, zu drei verschiedenen Kamerapositionen wechseln und von jeder ein KI-Bild generieren — ohne Kamera, Crew oder teure VFX-Assets in die Nähe der Produktion zu bringen.

Das ist KI-Hinzufügen in Splat Labs Cloud. Das dritte Teil unseres KI-Szenenredesign-Werkzeugkastens — zusammen mit KI-Entfernen und KI-Redesign.


Warum traditionelle Previsualisierung zu kurz greift

Previsualisierung ist bei schweren VFX-Drehs keine Option. Wenn Sie nicht planen, wie CGI-Elemente mit realer Fotografie integriert werden, erfahren Sie in der Postproduktion, was schief gelaufen ist — zu Kosten von Zehntausenden von Dollar pro Iteration, plus Nachdrehe, Zeitverzögerungen, erneute Location-Buchungen und Neueinstellungen von Crew.

Die Branche löst dies derzeit durch das Zusammenstückeln unverbundener Werkzeuge. Location-Scouts liefern flache Fotopakete. Previsualisierungsstudios produzieren grobe 3D-Animationen aus diesen Fotos. Technische Previsualisierungsteams vermessen Kamerapositionen mit CAD. Jedes Teil wird isoliert produziert, und der Kameramann muss alles auf einem Monitor zusammenführen, während er versucht sich vorzustellen, wie es sich tatsächlich am Drehort anfühlen wird.

Die Diskrepanz zwischen der virtuellen Darstellung und der physischen Realität ist der Ort, an dem schlechte Entscheidungen entstehen. Wenn eine wichtige VFX-Sequenz Nachdrehe erfordert, weil die Setfotografie keinen Platz für den digitalen Asset gelassen hat, ist die Rechnung nie nur der Nachdrehtag. Es ist alles, was damit einhergeht.

Splat Labs komprimiert dies in einen einzigen Schritt. Den realen Drehort scannen. Zu jeder Kameraposition im 3D-Modell navigieren. Ein KI-Bild mit dem digitalen Asset im realen Maßstab aus diesem genauen Winkel generieren.

Die Previsualisierung ist der Drehort. Der Drehort ist die Previsualisierung.


Was sich für Produktionsteams ändert

Wir haben mit Kameraassistenten, VFX-Supervisoren und Produktionsdesignern darüber gesprochen, wie dies in ihren Arbeitsablauf passt, und einige Punkte tauchen immer wieder auf.

Für Kameraassistenten: Der unmittelbare Wert liegt in der Objektivplanung. Anstatt aus flachen Referenzfotos zu raten, navigieren Sie zu jeder Kameraposition im 3D-Scan und generieren ein KI-Bild aus diesem genauen Winkel. Wie wirkt die Kreatur von einem 24-mm-Objektiv an der Ecke des Zebrastreifens? Was ist mit einem 85-mm-Objektiv von der gegenüberliegenden Straßenseite? Diese Frage beantworten Sie in Minuten, nicht Wochen.

Für VFX-Supervisoren: Die Szene ist als Web-Link zugänglich. Kein VPN, keine spezielle Software, kein GPU-Workstation. Auf einem iPad am Set öffnen und dem Set-VFX-Team genau zeigen, wie der digitale Asset mit der Plate-Fotografie zusammenpassen muss. Die räumliche Referenz ist immer da, auf jedem Gerät, zu jedem Zeitpunkt während des Drehs.

Für Location-Scouts und Produktionsdesigner: Sie liefern keine flachen Fotopakete von Kandidatenstandorten mehr. Sie liefern navigierbare 3D-Umgebungen. Das gesamte Produktionsteam kann einen Drehort aus der Ferne erkunden — ihn selbst durchqueren — bevor jemand ein Flugticket kauft.


Nicht nur Film

Die Fähigkeit, KI-Bilder zu generieren, die große Objekte im realen Maßstab innerhalb eines echten 3D-Scans eines realen Ortes zeigen, ist weit über VFX hinaus nützlich.

Eventproduktion. Ein Konzertveranstalter, der ein Stadion für eine Tournee-Band bewertet, muss wissen, ob eine benutzerdefinierte Bühnenkonfiguration passt, wo Sichtlinien für verschiedene Sitzbereiche funktionieren und wie ein bestimmtes Bühnenbild im Maßstab wirkt. Den Veranstaltungsort scannen, die Bühne in tatsächlichen Abmessungen einfügen und diese Fragen beantworten, bevor ein einziger Produktionsanruf getätigt wird.

Architektur und Stadtplanung. Ein Architekt, der ein neues Gebäude auf einem Stadtblock vorschlägt, muss Interessengruppen zeigen, wie die Struktur im Kontext wirkt. Den Block per Drohne scannen, das Gebäude maßstäblich einfügen und der Planungskommission ermöglichen, auf Straßenebene darum herumzugehen. Die Maßstabsbeziehungen sind ehrlich, weil der Scan die reale Welt gemessen hat.

Veranstaltungsverkauf. Veranstaltungsorte, die an potenzielle Event-Kunden verkaufen, können den Rohraum scannen und event-spezifische Konfigurationen einfügen — Bühnenpositionen, Bestuhlung, Lichttechnik — im realen Maßstab. Das Event verkaufen, bevor es existiert, in einem Medium, das der Kunde tatsächlich erkunden kann.


Wie es funktioniert

Der Arbeitsablauf spiegelt die anderen KI-Szenenredesign-Funktionen wider — bewusst einfach gehalten:

1. Den Drehort erfassen. Für Außenaufnahmen kann eine Drohne, die für Gaussian-Splat-Aufnahmen ausgerüstet ist (DJI oder ein dediziertes Luftgestell), eine städtische Umgebung in einem einzigen Flug scannen. Für Innenräume erfasst eine PortalCam alles in einer Begehung. Splat Labs akzeptiert Daten von jeder Gaussian-Splat-Quelle — hardwareunabhängig.

2. Auf Splat Labs hochladen. Unter cloud.splatlabs.ai anmelden, den Scan hochladen und die Cloud die Verarbeitung übernehmen lassen. Kein lokaler GPU-Workstation erforderlich.

3. Die KI befehlen. KI-Szenenredesign öffnen, beschreiben, was eingefügt werden soll — Position, Maßstab und Charakter — und absenden.

4. Die Ergebnisse teilen. Der originale 3D-Scan ist als Web-Link teilbar, und Ihre KI-generierten Bilder werden so verschickt, wie Sie es brauchen — per Slack, E-Mail oder in einer Client-Präsentation. Das 3D-Modell öffnet sich in jedem Browser auf jedem Gerät, und Ihre KI-Bilder sind Standarddateien, die jeder anzeigen kann.

Der gesamte Durchlauf von der Location-Erfassung bis zu teilbaren Previsualisierungsbildern wird in Stunden gemessen, nicht Wochen. Für ein Produktionsteam, das entscheidet, ob ein Drehort für eine komplexe VFX-Sequenz funktioniert, verändert diese Geschwindigkeit, was in der Scout-Phase möglich ist.


Cloud-nativ, nicht Desktop-gebunden

Dies ist besonders für Produktionsumgebungen wichtig. Traditionelle 3D-KI-Werkzeuge für Film — einschließlich Plattformen wie Veesus Arena Intelligence — erfordern teure Windows-Desktop-Workstations mit High-End-GPUs. Die Verarbeitung erfolgt lokal. Sie benötigen spezialisierte Hardware, geschulte Bediener und eine kontrollierte Umgebung.

Produktionsumgebungen sind das Gegenteil von kontrolliert. Sie sind chaotisch, mobil und verteilt. Ein Werkzeug, das einen GPU-Workstation an einem festen Bürostandort erfordert, ist ein Werkzeug, das nicht am Set, im Scout-Van, beim Kundentreffen oder im Schnittbüro funktioniert.

Splat Labs läuft in einem Webbrowser. Der Scan wird von jedem Gerät aus hochgeladen. Der Befehl wird auf einem Laptop eingegeben. Das Ergebnis wird als Link geliefert. Das ist keine kleine Bequemlichkeit — es ist der Unterschied zwischen einem Werkzeug, das dort funktioniert, wo Sie es tatsächlich brauchen, und einem, das das nicht tut.


Was als nächstes kommt

Die aktuelle Funktion fügt KI-generierte visuelle Darstellungen von Objekten in Gaussian-Splat-Szenen ein. Die nächste Grenze — in aktiver Entwicklung — ist Prompt-to-True-3D: Das Generieren echter volumetrischer 3D-Geometrie innerhalb des Scans aus einem Textbefehl.

Der Unterschied: Heute fügt die KI eine fotorealistische Darstellung ein. Bald wird die KI ein echtes 3D-Mesh generieren — exportierbar, messbar und direkt in VFX- und CAD-Pipelines integrierbar. Für Produktionsteams schließt dies die Lücke zwischen Location-Erfassung, Previsualisierung und Asset-Produktion in einer einzigen Plattform.

Wenn Sie als Erster in der Reihe stehen möchten, nehmen Sie Kontakt auf.


Ausprobieren

Splat Labs ist kostenlos zu starten — der kostenlose Tarif enthält zwei Projekte. Laden Sie einen Gaussian Splat hoch, experimentieren Sie mit KI-Funktionen und sehen Sie die Ergebnisse selbst. KI-Szenenredesign-Funktionen sind für 35 USD pro Projekt verfügbar oder in großen Mengen in jährlichen Business-Plänen enthalten. Vollständige Preisübersicht hier.


Verwandte Artikel

Related Articles

KI-Objekteinfügung: VFX zu 3D-Gaussian-Splats hinzufügen | Splat Labs Blog | Splat Labs - Gaussian Splat Cloud