Splat Labs
Back to Blog
Article

AI 오브젝트 삽입: 3D Gaussian Splat에 VFX 추가하기

AI 텍스트 프롬프트를 사용하여 실제 Gaussian Splat 스캔에 VFX, CGI, 3D 오브젝트를 정확한 스케일로 삽입하세요. Splat Labs를 무료로 체험해 보세요.

Splat Labs TeamFebruary 23, 20266분 읽기
AI 오브젝트 삽입: 3D Gaussian Splat에 VFX 추가하기

스크립트에는 괴물의 키가 300피트라고 나와 있습니다. 도쿄의 시부야 교차로 — 지구상에서 가장 많이 촬영된 교차로 — 의 스카이라인을 넘어 모습을 드러냅니다. 촬영 감독은 알아야 합니다: 도로 수준의 카메라 위치에서, 어떤 렌즈가 압도감을 주는가? 24mm 광각 렌즈와 135mm 망원 렌즈에서 프레임을 얼마나 채우는가? 배우들을 어디에 배치해야 카메라에서 시선이 맞는가 — 사후 제작 8개월 후에야 존재하게 될 생물에 대해?

전통적으로 답은: 프리비주얼라이제이션 스튜디오를 고용하세요. 그들은 Google Street View와 참조 사진을 기반으로 교차로의 거친 3D 버전을 만듭니다. VFX 팀이 프록시 생물을 모델링합니다. 프리비주얼라이제이션 수퍼바이저가 Maya나 Unreal에서 조합합니다. 몇 주 후에 유용한 결과물을 얻게 되지만 — 실제로 촬영할 실제 장소의 물리적 현실과는 동떨어져 있습니다.

저희는 다른 접근 방식을 시도했습니다. 시부야 교차로를 드론으로 스캔하고, Gaussian Splat을 Splat Labs에 업로드하고, 여섯 단어를 입력했습니다.

"배경의 건물들 위에 어른거리는 거대한 고질라를 추가해 주세요."


결과

3D Gaussian Splat으로부터 실제 세계 스케일로 시부야 교차로의 AI 이미지에 생성된 300피트 생물 — 스캔의 어느 카메라 위치로든 이동하여 새 이미지를 생성할 수 있습니다 — 세트에 누구도 등장하기 전에 렌즈 선택과 블로킹을 계획하세요.

이것은 3D Gaussian Splat 내부의 특정 시점에서 생성된 AI 포토리얼리스틱 이미지입니다. 원본 3D 모델의 어느 위치로든 이동하여 새 이미지를 생성하세요 — 원하는 어느 카메라 위치에서든 생물이 어떻게 보이는지 확인하세요. 촬영 감독은 시부야역 하치코 출구에 서서 iPad에서 3D 스캔을 열고, 세 가지 다른 카메라 위치로 이동하고, 각각에서 AI 이미지를 생성할 수 있습니다 — 카메라, 스태프, 또는 비싼 VFX 에셋을 프로덕션 근처에 가져가지 않고도.

이것이 바로 Splat Labs Cloud 내부의 AI Add입니다. 저희 AI Scene Redesign 툴킷의 세 번째 기능 — AI RemoveAI Redesign과 함께.


전통적인 프리비주얼라이제이션이 부족한 이유

VFX 작업이 많은 촬영에서 프리비주얼라이제이션은 선택 사항이 아닙니다. CGI 요소가 실제 세계 촬영과 어떻게 통합되는지 계획하지 않으면, 사후 제작에서 무엇이 잘못됐는지 알게 됩니다 — 반복당 수만 달러의 비용에, 재촬영, 일정 지연, 장소 재예약, 스태프 재고용이 따라옵니다.

업계는 현재 서로 연결되지 않은 도구들을 조합하여 이를 해결합니다. 로케이션 스카우트는 평면 사진 패키지를 촬영합니다. 프리비주얼라이제이션 스튜디오는 그 사진들에서 거친 3D 애니메이션을 만듭니다. 테크니컬 프리비주얼라이제이션 팀이 CAD를 사용하여 카메라 위치를 측량합니다. 각 부분은 따로 만들어지고, 촬영 감독은 실제 로케이션에서 어떻게 느껴질지 상상하면서 모니터에서 이 모든 것을 조합해야 합니다.

가상 표현과 물리적 현실 사이의 단절이 나쁜 결정이 살아가는 곳입니다. 온세트 촬영이 디지털 에셋을 위한 공간을 남기지 않았다는 이유로 주요 VFX 시퀀스가 재촬영을 필요로 할 때, 청구서는 결코 재촬영 비용만이 아닙니다. 그것과 함께 오는 모든 것이 포함됩니다.

Splat Labs는 이것을 단일 단계로 압축합니다. 실제 장소를 스캔하세요. 3D 모델에서 어느 카메라 위치로든 이동하세요. 정확히 그 각도에서 실제 세계 스케일로 디지털 에셋이 배치된 AI 이미지를 생성하세요.

프리비주얼라이제이션 자체가 장소입니다. 장소 자체가 프리비주얼라이제이션입니다.


프로덕션 팀에게 어떤 변화가 생기는가

저희는 촬영 감독, VFX 수퍼바이저, 프로덕션 디자이너들과 이것이 그들의 워크플로우에 어떻게 맞는지 대화해 왔고, 몇 가지 공통된 사항이 계속 나옵니다.

촬영 감독에게: 즉각적인 가치는 렌즈 계획입니다. 평면 참조 사진에서 추측하는 대신, 3D 스캔의 어느 카메라 위치로든 이동하여 정확히 그 각도에서 AI 이미지를 생성합니다. 횡단보도 모퉁이에서 24mm로 생물이 어떻게 보이는가? 길 반대편에서 85mm로는? 그 질문에 몇 주가 아닌 몇 분 안에 답할 수 있습니다.

VFX 수퍼바이저에게: 씬은 웹 링크로 접근 가능합니다. VPN도, 특별한 소프트웨어도, GPU 워크스테이션도 필요 없습니다. 세트에서 iPad로 열어 온세트 VFX 팀에게 디지털 에셋이 플레이트 촬영과 어떻게 맞아야 하는지 정확히 보여주세요. 공간적 참조는 촬영 중 언제든지, 어느 기기에서나 항상 있습니다.

로케이션 스카우트와 프로덕션 디자이너에게: 더 이상 후보 장소의 평면 사진 패키지를 전달하지 않습니다. 탐색 가능한 3D 환경을 전달합니다. 전체 프로덕션 팀이 누구도 비행기 표를 사기 전에 원격으로 장소를 탐색할 수 있습니다 — 직접 걸어 다니면서.


영화만이 아닙니다

실제 장소의 실제 3D 스캔 내에서 실제 세계 스케일로 큰 오브젝트를 보여주는 AI 이미지를 생성하는 능력은 VFX를 훨씬 넘어서 유용합니다.

이벤트 프로덕션. 투어링 아티스트를 위한 경기장을 평가하는 콘서트 프로모터는 커스텀 스테이지 구성이 맞는지, 다양한 좌석 구역에서 사이트라인이 어떻게 작동하는지, 특정 세트 디자인이 스케일에서 어떻게 보이는지 알아야 합니다. 공연장을 스캔하고, 실제 치수로 스테이지를 삽입하고, 단일 프로덕션 통화가 이루어지기 전에 그 질문에 답하세요.

건축과 도시 계획. 도시 블록에 새 건물을 제안하는 건축가는 이해관계자들에게 구조물이 맥락에서 어떻게 보이는지 보여줘야 합니다. 블록을 드론으로 스캔하고, 스케일에 맞게 건물을 삽입하고, 계획 위원회가 도로 수준에서 주변을 걸어 다니게 하세요. 스캔이 실제 세계를 측정했기 때문에 스케일 관계가 정직합니다.

공연장 판매. 예비 이벤트 클라이언트에게 판매하는 공연장은 원시 공간을 스캔하고 이벤트별 구성을 삽입할 수 있습니다 — 스테이지 위치, 좌석, 조명 리그 — 실제 스케일로. 클라이언트가 실제로 탐색할 수 있는 미디어로, 이벤트가 존재하기 전에 판매하세요.


작동 방식

워크플로우는 다른 AI Scene Redesign 기능을 미러링합니다 — 의도적으로 단순하게:

1. 장소를 캡처합니다. 외부 공간의 경우, Gaussian Splat 캡처를 위해 장착된 드론(DJI 또는 전용 항공 리그)이 단일 비행으로 도시 환경을 스캔할 수 있습니다. 내부의 경우, PortalCam이 워크스루에서 모든 것을 캡처합니다. Splat Labs는 모든 Gaussian Splat 소스의 데이터를 허용합니다 — 하드웨어에 구애받지 않습니다.

2. Splat Labs에 업로드합니다. cloud.rockrobotic.com에 로그인하고, 스캔을 업로드하고, 클라우드가 처리를 담당하게 하세요. 로컬 GPU 워크스테이션 불필요.

3. AI에게 프롬프트를 입력합니다. AI Scene Redesign을 열고, 삽입하고 싶은 것을 설명합니다 — 위치, 스케일, 특성 — 그리고 제출하세요.

4. 결과를 공유합니다. 원본 3D 스캔은 웹 링크로 공유 가능하고, AI 생성 이미지는 필요한 방식으로 배포됩니다 — Slack, 이메일, 또는 클라이언트 덱에서. 3D 모델은 어느 기기의 어느 브라우저에서나 열리고, AI 이미지는 누구나 볼 수 있는 표준 파일입니다.

장소 캡처에서 공유 가능한 프리비주얼라이제이션 이미지까지 총 소요 시간은 몇 주가 아닌 몇 시간으로 측정됩니다. 복잡한 VFX 시퀀스에 장소가 적합한지 결정하는 프로덕션 팀에게, 그 속도는 스카우트 단계에서 가능한 것을 바꿉니다.


클라우드 네이티브, 데스크톱에 묶이지 않음

이것은 특히 프로덕션 환경에서 중요합니다. 영화를 위한 전통적인 3D AI 도구들 — Veesus Arena Intelligence 같은 플랫폼 포함 — 은 고사양 GPU가 있는 비싼 Windows 데스크톱 워크스테이션을 필요로 합니다. 처리는 로컬에서 이루어집니다. 전문 하드웨어, 훈련된 운영자, 통제된 환경이 필요합니다.

프로덕션 환경은 통제된 것과 정반대입니다. 혼란스럽고, 이동적이고, 분산되어 있습니다. 고정된 사무실 위치에서 GPU 워크스테이션을 필요로 하는 도구는 세트에서, 스카우트 밴에서, 클라이언트 미팅에서, 또는 편집 공간에서 작동하지 않는 도구입니다.

Splat Labs는 웹 브라우저에서 실행됩니다. 스캔은 어느 기기에서나 업로드됩니다. 프롬프트는 랩톱에서 입력됩니다. 결과는 링크로 전달됩니다. 그것은 사소한 편의가 아닙니다 — 실제로 필요한 곳에서 작동하는 도구와 그렇지 않은 도구의 차이입니다.


다음에 오는 것

현재의 기능은 Gaussian Splat 씬에 오브젝트의 AI 생성 시각적 표현을 삽입합니다. 다음 단계 — 현재 개발 중 — 는 Prompt-to-True-3D: 텍스트 프롬프트로 스캔 내부에 실제 체적 3D 형상을 생성하는 것입니다.

차이점: 오늘날 AI는 포토리얼리스틱 표현을 삽입합니다. 곧 AI는 실제 3D 메시를 생성할 것입니다 — 내보내기 가능하고, 측정 가능하며, VFX 및 CAD 파이프라인에 직접 통합 가능합니다. 프로덕션 팀에게, 이것은 단일 플랫폼에서 장소 캡처, 프리비주얼라이제이션, 에셋 프로덕션 사이의 루프를 완성합니다.

먼저 줄을 서고 싶으시다면, 문의하세요.


체험해 보기

Splat Labs는 무료로 시작할 수 있습니다 — 무료 티어에는 두 개의 프로젝트가 포함됩니다. Gaussian Splat을 업로드하고, AI 기능을 실험하고, 결과를 직접 확인하세요. AI Scene Redesign 기능은 프로젝트당 $35에, 또는 연간 비즈니스 플랜에서 대량으로 이용 가능합니다. 전체 가격 보기.


관련 글

Related Articles

건설에서 Gaussian Splatting의 ROI: AEC 기업들이 360° 사진에서 업그레이드하는 이유

Article
March 11, 202610분 읽기

건설에서 Gaussian Splatting의 ROI: AEC 기업들이 360° 사진에서 업그레이드하는 이유

엔터프라이즈 AEC 기업들은 기술이 멋지기 때문에 구매하지 않습니다 — 비용이 많이 드는 문제를 해결하기 때문에 구매합니다. Skender가 Gaussian Splatting을 사용하여 입찰을 강화하고, 재작업을 방지하며, 분쟁을 40% 더 빠르게 해결하는 방법입니다.

ConstructionAECCase Study+5 more
Read More
AI 오브젝트 삽입: 3D Gaussian Splat에 VFX 추가하기 | Splat Labs Blog | Splat Labs - Gaussian Splat Cloud