Splat Labs
Back to Blog
Article

Inserção de Objetos com IA: Adicione VFX a Gaussian Splats 3D

Insira VFX, CGI e objetos 3D em escaneamentos reais de Gaussian Splat na escala exata usando um prompt de texto de IA. Experimente o Splat Labs gratuitamente.

Splat Labs TeamFebruary 23, 20266 min de leitura
Inserção de Objetos com IA: Adicione VFX a Gaussian Splats 3D

O roteiro diz que o monstro tem 90 metros de altura. Ele ultrapassa a linha do horizonte no Shibuya Crossing, Tóquio — o cruzamento mais filmado da Terra. O Diretor de Fotografia precisa saber: a partir da posição da câmera ao nível da rua, qual lente faz com que ele pareça imponente? Quanto do enquadramento ele preenche a partir de um 24mm wide versus um telefoto 135mm? Onde você posiciona os atores para que a linha de visão seja lida em câmera — para uma criatura que não existirá até oito meses na pós-produção?

Tradicionalmente, a resposta é: contratar um estúdio de pré-visualização. Eles constroem uma versão 3D aproximada do cruzamento a partir do Google Street View e fotos de referência. Sua equipe de VFX modela uma criatura proxy. Um supervisor de pré-vis monta tudo no Maya ou Unreal. Você obtém algo útil semanas depois — mas está desconectado da realidade física da locação real onde você vai filmar.

Tentamos uma abordagem diferente. Escaneamos o Shibuya Crossing com drone, fizemos o upload do Gaussian Splat para o Splat Labs e digitamos seis palavras.

"Adicione um Godzilla gigante pairando sobre os prédios ao fundo."


O Resultado

Uma criatura de 90 metros gerada na escala do mundo real em uma imagem de IA do Shibuya Crossing — a partir do Gaussian Splat 3D. Navegue até qualquer posição de câmera no escaneamento e gere uma nova imagem — planeje escolhas de lentes e bloqueio antes de qualquer pessoa chegar ao set.

Essa é uma imagem fotorrealista gerada por IA produzida a partir de um ponto de vista específico dentro do Gaussian Splat 3D. Navegue até qualquer posição no modelo 3D original e gere uma nova imagem — verifique como a criatura aparece a partir de qualquer posição de câmera que você quiser. Um DP poderia ficar na saída Hachiko da Estação de Shibuya, abrir o escaneamento 3D num iPad, mover para três posições de câmera diferentes e gerar uma imagem de IA de cada uma — sem colocar uma câmera, equipe ou ativo de VFX caro em qualquer lugar próximo à produção.

Este é o AI Add dentro do Splat Labs Cloud. A terceira peça do nosso kit de ferramentas AI Scene Redesign — ao lado do AI Remove e do AI Redesign.


Por Que a Pré-Visualização Tradicional é Insuficiente

A pré-visualização não é opcional em filmagens com VFX pesado. Se você não planejar como os elementos CGI se integram com a fotografia do mundo real, você descobre o que deu errado na pós-produção — a um custo de dezenas de milhares de dólares por iteração, mais refilmagens, atrasos de cronograma, renegociação de locação e recontratações de equipe.

A indústria atualmente resolve isso remendando ferramentas desconectadas. Scouts de locação fotografam pacotes de fotos planas. Estúdios de pré-vis produzem animações 3D aproximadas a partir dessas fotos. Equipes de pré-visualização técnica levantam posições de câmera usando CAD. Cada peça é produzida isoladamente, e o DP tem que reconciliar todas elas num monitor enquanto tenta imaginar como vai parecer de verdade na locação.

A desconexão entre a representação virtual e a realidade física é onde vivem as más decisões. Quando uma sequência importante de VFX requer refilmagens porque a fotografia no set não deixou espaço para o ativo digital, a conta nunca é só a refilmagem. É tudo que vem com ela.

O Splat Labs colapsa isso em uma única etapa. Escaneie a locação real. Navegue até qualquer posição de câmera no modelo 3D. Gere uma imagem de IA com seu ativo digital posicionado na escala do mundo real a partir desse ângulo exato.

A pré-vis é a locação. A locação é a pré-vis.


O Que Muda para as Equipes de Produção

Temos conversado com DPs, supervisores de VFX e designers de produção sobre como isso se encaixa no fluxo de trabalho deles, e algumas coisas continuam surgindo.

Para DPs: O valor imediato é o planejamento de lentes. Em vez de adivinhar a partir de fotos de referência planas, você navega para qualquer posição de câmera no escaneamento 3D e gera uma imagem de IA daquele ângulo exato. Como a criatura aparece a partir de um 24mm na esquina da faixa de pedestres? E um 85mm do outro lado da rua? Você responde a essa pergunta em minutos, não em semanas.

Para supervisores de VFX: A cena é acessível como um link da web. Sem VPN, sem software especial, sem workstation com GPU. Abra no iPad no set e mostre à equipe de VFX no set exatamente como o ativo digital precisa se encaixar com a fotografia de placa. A referência espacial está sempre lá, em qualquer dispositivo, a qualquer momento durante a filmagem.

Para scouts de locação e designers de produção: Você não está mais entregando pacotes de fotos planas de locações candidatas. Você está entregando ambientes 3D navegáveis. Toda a equipe de produção pode explorar uma locação remotamente — percorrendo ela mesmos — antes de qualquer pessoa comprar uma passagem de avião.


Não Apenas Cinema

A capacidade de gerar imagens de IA mostrando objetos grandes na escala do mundo real dentro de um escaneamento 3D real de uma locação real é útil muito além do VFX.

Produção de eventos. Um promotor de shows avaliando um estádio para uma turnê precisa saber se uma configuração de palco personalizada vai caber, onde as linhas de visão funcionam para diferentes zonas de assentos e como um design de set específico aparece em escala. Escaneie o local, insira o palco nas dimensões reais e responda a essas perguntas antes de uma única ligação de produção ser feita.

Arquitetura e planejamento urbano. Um arquiteto propondo um novo prédio em um quarteirão precisa mostrar às partes interessadas como a estrutura aparece em contexto. Escaneie o quarteirão com drone, insira o prédio em escala e deixe a comissão de planejamento andar ao redor dele ao nível da rua. As relações de escala são honestas porque o escaneamento mediu o mundo real.

Venda de locais para eventos. Locais vendendo para clientes de eventos em potencial podem escanear o espaço bruto e inserir configurações específicas de eventos — posições de palco, assentos, estruturas de iluminação — na escala real. Venda o evento antes de ele existir, em um meio que o cliente pode realmente explorar.


Como Funciona

O fluxo de trabalho espelha as outras capacidades do AI Scene Redesign — deliberadamente simples:

1. Capture a locação. Para exteriores, um drone equipado para captura de Gaussian Splat (DJI ou uma aeronave dedicada) pode escanear um ambiente urbano em um único voo. Para interiores, uma PortalCam captura tudo em um percurso. O Splat Labs aceita dados de qualquer fonte de Gaussian Splat — agnóstico de hardware.

2. Faça upload para o Splat Labs. Faça login em cloud.rockrobotic.com, faça o upload do escaneamento e deixe a nuvem cuidar do processamento. Sem workstation com GPU local necessária.

3. Faça prompt à IA. Abra o AI Scene Redesign, descreva o que você quer inserir — sua posição, escala e caráter — e envie.

4. Compartilhe os resultados. O escaneamento 3D original é compartilhável como link da web, e suas imagens geradas por IA saem da forma que você precisar — no Slack, por e-mail ou em uma apresentação para cliente. O modelo 3D abre em qualquer navegador em qualquer dispositivo, e suas imagens de IA são arquivos padrão que qualquer pessoa pode visualizar.

O tempo total de resposta, da captura da locação às imagens de pré-visualização compartilháveis, é medido em horas, não semanas. Para uma equipe de produção decidindo se uma locação funciona para uma sequência complexa de VFX, essa velocidade muda o que é possível na fase de scout.


Nativo na Nuvem, Não Preso ao Desktop

Isso importa especificamente para ambientes de produção. As ferramentas tradicionais de IA 3D para cinema — incluindo plataformas como Veesus Arena Intelligence — requerem workstations desktop Windows caras com GPUs de alto desempenho. O processamento acontece localmente. Você precisa de hardware especializado, operadores treinados e um ambiente controlado.

Ambientes de produção são o oposto de controlados. Eles são caóticos, móveis e distribuídos. Uma ferramenta que requer uma workstation com GPU em um escritório fixo é uma ferramenta que não funciona no set, na van de scout, na reunião com o cliente ou na sala de edição.

O Splat Labs roda em um navegador web. O escaneamento é feito upload de qualquer dispositivo. O prompt é digitado em um laptop. O resultado é entregue como link. Isso não é uma conveniência menor — é a diferença entre uma ferramenta que funciona onde você realmente precisa e uma que não funciona.


O Que Vem a Seguir

A capacidade atual insere representações visuais geradas por IA de objetos em cenas Gaussian Splat. A próxima fronteira — em desenvolvimento ativo — é o Prompt-to-True-3D: gerar geometria 3D volumétrica real dentro do escaneamento a partir de um prompt de texto.

A diferença: hoje, a IA insere uma representação fotorrealista. Em breve, a IA gerará uma malha 3D real — exportável, mensurável e integrável diretamente em pipelines de VFX e CAD. Para equipes de produção, isso fecha o ciclo entre captura de locação, pré-visualização e produção de ativos em uma única plataforma.

Se você quiser ser o primeiro na fila, entre em contato.


Experimente

O Splat Labs é gratuito para começar — o nível gratuito inclui dois projetos. Faça upload de um Gaussian Splat, experimente os recursos de IA e veja os resultados por si mesmo. Os recursos do AI Scene Redesign estão disponíveis por US$ 35 por projeto, ou em maior volume nos planos Business anuais. Preços completos aqui.


Relacionados

Related Articles

O ROI do Gaussian Splatting na Construção: Por que Empresas AEC Estão Migrando das Fotos 360°

Article
March 11, 202610 min de leitura

O ROI do Gaussian Splatting na Construção: Por que Empresas AEC Estão Migrando das Fotos 360°

Empresas AEC empresariais não compram tecnologia porque é interessante — elas compram porque resolve problemas caros. Veja como a Skender está usando o Gaussian Splatting para apertar propostas, prevenir retrabalho e resolver disputas 40% mais rápido.

ConstructionAECCase Study+5 more
Read More
Inserção de Objetos com IA: Adicione VFX a Gaussian Splats 3D | Splat Labs Blog | Splat Labs - Gaussian Splat Cloud