Splat Labs
Back to Blog
Article

Insertion d'objets par IA : Ajouter des VFX aux Gaussian Splats 3D

Insérez des VFX, des images de synthèse et des objets 3D dans des scans Gaussian Splat réels à l'échelle exacte grâce à une invite textuelle IA. Essayez Splat Labs gratuitement.

Splat Labs TeamFebruary 23, 20266 min de lecture
Insertion d'objets par IA : Ajouter des VFX aux Gaussian Splats 3D

Le scénario dit que le monstre mesure 300 pieds de haut. Il surgit de la ligne d'horizon à Shibuya Crossing, Tokyo — l'intersection la plus filmée de la planète. Le directeur de la photographie doit savoir : depuis la position de caméra au niveau de la rue, quel objectif lui donne une silhouette imposante ? Quelle part du cadre occupe-t-il depuis un grand angle 24mm par rapport à un téléobjectif 135mm ? Où placer les acteurs pour que la ligne de regard passe à la caméra — pour une créature qui n'existera pas avant huit mois de post-production ?

Traditionnellement, la réponse est : embauchez un studio de pré-vis. Ils construisent une version 3D grossière de l'intersection à partir de Google Street View et de photos de référence. Votre équipe VFX modélise une créature proxy. Un superviseur de pré-vis assemble le tout dans Maya ou Unreal. Vous obtenez quelque chose d'utile des semaines plus tard — mais cela est déconnecté de la réalité physique du lieu réel où vous allez tourner.

Nous avons essayé une approche différente. Nous avons scanné Shibuya Crossing par drone, téléchargé le Gaussian Splat sur Splat Labs, et tapé six mots.

"Ajoute un Godzilla géant menaçant au-dessus des bâtiments en arrière-plan."


Le résultat

Une créature de 300 pieds générée à l'échelle du monde réel dans une image IA de Shibuya Crossing — depuis le Gaussian Splat 3D. Naviguez jusqu'à n'importe quelle position de caméra dans le scan et générez une nouvelle image — planifiez les choix d'objectifs et le blocage avant que quiconque arrive sur le plateau.

C'est une image photoréaliste générée par IA produite depuis un point de vue spécifique à l'intérieur du Gaussian Splat 3D. Naviguez jusqu'à n'importe quelle position dans le modèle 3D original et générez une nouvelle image — vérifiez comment la créature apparaît depuis n'importe quelle position de caméra souhaitée. Un directeur de la photographie pourrait se tenir à la sortie Hachiko de la station de Shibuya, ouvrir le scan 3D sur un iPad, se déplacer vers trois positions de caméra différentes, et générer une image IA depuis chacune d'elles — sans qu'une caméra, une équipe ou un actif VFX coûteux n'approchent de la production.

C'est AI Add dans Splat Labs Cloud. La troisième pièce de notre boîte à outils AI Scene Redesign — aux côtés de AI Remove et AI Redesign.


Pourquoi la pré-vis traditionnelle est insuffisante

La pré-visualisation n'est pas optionnelle lors des tournages à effets visuels lourds. Si vous ne planifiez pas comment les éléments CGI s'intègrent avec la photographie du monde réel, vous découvrez ce qui a mal tourné en post-production — à un coût de dizaines de milliers de dollars par itération, plus les retournages, les retards de calendrier, les nouvelles réservations de lieu et les nouvelles embauches d'équipe.

L'industrie résout actuellement ce problème en assemblant des outils déconnectés. Les éclaireurs de lieux réalisent des packages de photos plates. Les studios de pré-vis produisent des animations 3D grossières à partir de ces photos. Les équipes de pré-visualisation technique relèvent les positions de caméra en utilisant la CAO. Chaque pièce est produite de façon isolée, et le directeur de la photographie doit les réconcilier toutes sur un moniteur tout en essayant d'imaginer comment cela se passera réellement sur le lieu.

Le décalage entre la représentation virtuelle et la réalité physique est là où vivent les mauvaises décisions. Quand une séquence VFX majeure nécessite des retournages parce que la photographie sur le plateau n'a pas laissé de place pour l'asset numérique, la facture n'est jamais juste le retournage. C'est tout ce qui vient avec.

Splat Labs condense tout cela en une seule étape. Scannez le lieu réel. Naviguez jusqu'à n'importe quelle position de caméra dans le modèle 3D. Générez une image IA avec votre asset numérique placé à l'échelle du monde réel depuis cet angle exact.

La pré-vis est le lieu. Le lieu est la pré-vis.


Ce qui change pour les équipes de production

Nous avons discuté avec des directeurs de la photographie, des superviseurs VFX et des chefs décorateurs de la façon dont cela s'intègre dans leur flux de travail, et quelques points reviennent constamment.

Pour les directeurs de la photographie : La valeur immédiate est la planification des objectifs. Au lieu de deviner à partir de photos de référence plates, vous naviguez jusqu'à n'importe quelle position de caméra dans le scan 3D et générez une image IA depuis cet angle exact. Comment la créature apparaît-elle depuis un 24mm au coin du passage piéton ? Et depuis un 85mm du côté opposé de la rue ? Vous répondez à cette question en quelques minutes, pas en semaines.

Pour les superviseurs VFX : La scène est accessible comme un lien web. Pas de VPN, pas de logiciel spécial, pas de station de travail GPU. Ouvrez-la sur un iPad sur le plateau et montrez à l'équipe VFX sur place exactement comment l'asset numérique doit s'adapter à la photographie de plaque. La référence spatiale est toujours là, sur n'importe quel appareil, à n'importe quel moment pendant le tournage.

Pour les éclaireurs de lieux et les chefs décorateurs : Vous ne livrez plus des packages de photos plates de lieux candidats. Vous livrez des environnements 3D navigables. L'ensemble de l'équipe de production peut explorer un lieu à distance — en le parcourant eux-mêmes — avant que quiconque achète un billet d'avion.


Pas seulement pour le cinéma

La capacité de générer des images IA montrant de grands objets à l'échelle du monde réel dans un vrai scan 3D d'un lieu réel est utile bien au-delà des VFX.

Production événementielle. Un promoteur de concerts évaluant un stade pour un artiste en tournée doit savoir si une configuration de scène personnalisée rentrera, où les lignes de vue fonctionnent pour différentes zones de sièges, et comment un design de scène spécifique se lit à l'échelle. Scannez le lieu, insérez la scène aux dimensions réelles, et répondez à ces questions avant qu'un seul appel de production ne soit passé.

Architecture et urbanisme. Un architecte proposant un nouveau bâtiment sur un îlot de ville doit montrer aux parties prenantes comment la structure se lit en contexte. Scannez l'îlot par drone, insérez le bâtiment à l'échelle, et laissez le comité de planification se promener autour au niveau de la rue. Les relations d'échelle sont honnêtes parce que le scan a mesuré le monde réel.

Ventes de lieux événementiels. Les lieux qui vendent à des clients événementiels potentiels peuvent scanner l'espace brut et insérer des configurations spécifiques à l'événement — positions de scène, sièges, portiques d'éclairage — à l'échelle réelle. Vendez l'événement avant qu'il n'existe, dans un medium que le client peut réellement explorer.


Comment ça fonctionne

Le flux de travail reflète les autres capacités AI Scene Redesign — délibérément simple :

1. Capturez le lieu. Pour les extérieurs, un drone équipé pour la capture Gaussian Splat (DJI ou un montage aérien dédié) peut scanner un environnement urbain en un seul vol. Pour les intérieurs, un PortalCam capture tout lors d'une visite. Splat Labs accepte des données de n'importe quelle source Gaussian Splat — agnostique en matière de matériel.

2. Téléchargez sur Splat Labs. Connectez-vous à cloud.splatlabs.ai, téléchargez le scan, et laissez le cloud gérer le traitement. Aucune station de travail GPU locale requise.

3. Invitez l'IA. Ouvrez AI Scene Redesign, décrivez ce que vous souhaitez insérer — sa position, son échelle et son caractère — et soumettez.

4. Partagez les résultats. Le scan 3D original est partageable comme un lien web, et vos images générées par IA sont envoyées comme vous en avez besoin — dans Slack, par e-mail, ou dans un dossier client. Le modèle 3D s'ouvre dans n'importe quel navigateur sur n'importe quel appareil, et vos images IA sont des fichiers standard que tout le monde peut consulter.

La durée totale de la capture du lieu aux images de pré-vis partageables se mesure en heures, pas en semaines. Pour une équipe de production qui décide si un lieu fonctionne pour une séquence VFX complexe, cette rapidité change ce qui est possible dans la phase de repérage.


Cloud natif, pas limité au bureau

Cela est particulièrement important pour les environnements de production. Les outils 3D IA traditionnels pour le cinéma — y compris des plateformes comme Veesus Arena Intelligence — nécessitent des stations de travail Windows coûteuses avec des GPU haut de gamme. Le traitement se fait localement. Vous avez besoin de matériel spécialisé, d'opérateurs formés et d'un environnement contrôlé.

Les environnements de production sont à l'opposé du contrôlé. Ils sont chaotiques, mobiles et distribués. Un outil qui nécessite une station de travail GPU dans un bureau fixe est un outil qui ne fonctionne pas sur le plateau, dans le van de repérage, lors de la réunion client, ou dans la salle de montage.

Splat Labs fonctionne dans un navigateur web. Le scan est téléchargé depuis n'importe quel appareil. L'invite est tapée sur un ordinateur portable. Le résultat est livré comme un lien. Ce n'est pas une commodité mineure — c'est la différence entre un outil qui fonctionne là où vous en avez réellement besoin et un qui ne fonctionne pas.


Ce qui vient ensuite

La capacité actuelle insère des représentations visuelles générées par IA d'objets dans des scènes Gaussian Splat. La prochaine frontière — en développement actif — est Prompt-to-True-3D : générer une vraie géométrie 3D volumétrique à l'intérieur du scan à partir d'une invite textuelle.

La différence : aujourd'hui, l'IA insère une représentation photoréaliste. Bientôt, l'IA générera un vrai maillage 3D — exportable, mesurable et intégrable directement dans les pipelines VFX et CAO. Pour les équipes de production, cela ferme la boucle entre la capture du lieu, la pré-visualisation et la production d'assets dans une seule plateforme.

Si vous souhaitez être le premier dans la liste, contactez-nous.


Essayez-le

Splat Labs est gratuit pour commencer — le niveau gratuit comprend deux projets. Téléchargez un Gaussian Splat, expérimentez avec les fonctionnalités IA, et voyez les résultats par vous-même. Les fonctionnalités AI Scene Redesign sont disponibles à 35 $ par projet, ou en volume dans les plans Business annuels. Tarifs complets ici.


En lien

Related Articles

The Olympic Exhibition That Can Never Disappear Again
April 13, 20266 min read

The Olympic Exhibition That Can Never Disappear Again

At Milano Cortina 2026, artist Josette Seitz used an XGRIDS PortalCam to capture the Clubhouse 26 Olympic Museum as a navigable Gaussian Splat — preserving an exhibition that ran for just two weeks in a private hospitality venue, now explorable by anyone in the world.

Gaussian SplattingCultural PreservationPortalCam+2 more
Read More
Insertion d'objets par IA : Ajouter des VFX aux Gaussian Splats 3D | Splat Labs Blog | Splat Labs - Gaussian Splat Cloud