Runway로 시네마틱 컷신 프로토타입 만드는 실전 워크플로

AI 비디오 생성 툴은 최종 컷신을 즉시 대체하는 수단이라기보다 연출·카메라·라이팅의 가설을 저렴하게 검증하는 프리비즈(previsualization) 도구다. Runway로 짧은 샷을 만들고 편집 타임라인에서 리듬을 먼저 확정한 뒤 승인된 의도만 Unreal Engine Sequencer나 Unity Timeline으로 재구성하면 재작업 비용을 크게 줄일 수 있다.

AI 비디오 생성으로 컷신 프로토타입을 만드는 이유

전통적인 컷신 제작은 콘티, 블로킹, 애니메이션, 라이팅, 렌더링 순으로 진행된다. 초반에 카메라와 감정선이 틀렸음을 발견하면 뒤 단계의 작업이 모두 되돌아간다. AI 비디오는 이 중 콘티 이후의 움직이는 시안을 빠르게 만드는 데 적합하다.

검증 대상	AI 비디오 프리비즈가 잘하는 일	엔진·DCC에서 확정할 일
카메라	구도, 렌즈 감각, 이동 방향, 컷 길이	정확한 카메라 경로와 충돌 없는 동선
연출	감정선, 시선 유도, 액션의 박자	플레이어 상태와 분기 처리
라이팅	시간대, 색 대비, 분위기	실제 머티리얼, Lumen/GI, 노출값
캐릭터	실루엣, 포즈의 의도, 장면 에너지	동일 인물 유지, 릭과 페이셜 애니메이션
최종 납품	편집본 방향성 검토	게임 내 실시간 재생과 최적화

AI 생성 샷과 게임 엔진 프리비즈를 비교하는 시네마틱 컷신 작업 화면

AI 비디오 생성 툴을 컷신 프로토타이핑에 어떻게 활용할까?

특정 도구의 기능을 고정된 목록으로 단정하기보다 같은 입력으로 결과를 비교해 프로젝트에 맞는 샷 생성기를 고르는 편이 안전하다. 서비스별 제공 모델, 해상도, 길이, 입력 방식은 플랜과 시점에 따라 바뀌므로 실제 제작 전에는 사용하려는 서비스의 최신 문서를 확인한다.

기준	비교 방법	선택 기준
이미지 참조 충실도	같은 키프레임을 입력해 의상·구도 유지율 비교	아트 디렉션이 엄격하면 유지율 우선
카메라 지시 이해도	`slow dolly in`, `low-angle tracking shot` 등 동일 지시 사용	카메라 의도가 덜 흔들리는 도구 선택
모션 안정성	5~8초 액션 샷을 여러 번 생성	손, 무기, 접촉 장면의 붕괴 빈도 확인
반복 제작성	프롬프트와 시드를 기록해 재생성	수정 요청에 대응할 수 있는 워크플로 우선
편집 적합성	24 fps 타임라인에 배치	컷 시작·끝 프레임이 자연스러운 결과 우선

핵심은 하나의 툴로 모든 샷을 완성하려 하지 않는 것이다. 인물 클로즈업, 환경 소개, 빠른 액션처럼 실패 양상이 다른 샷은 각각 가장 안정적인 결과를 채택하고 결과가 불안정한 샷은 엔진에서 직접 블로킹한다.

AI 컷신 프리비즈를 3단계로 만드는 방법

1. 샷 리스트를 먼저 고정한다

생성 전에 대본을 샷 단위로 쪼갠다. 한 샷에는 하나의 카메라 의도와 하나의 행동만 넣는다. 예를 들어 “주인공이 폐허를 지나 적을 발견하고 검을 뽑는다”는 한 프롬프트가 아니라 세 샷이다.

와이드 샷: 폐허와 주인공의 상대적 크기를 보여 준다.
미디엄 샷: 주인공이 멈추고 시선을 옮긴다.
클로즈업: 손이 검자루를 잡는다.

24 fps 기준으로 샷 길이를 먼저 적는다. 대화 리액션은 보통 2~4초, 환경 소개는 3~6초, 빠른 행동은 1~2초부터 검토하면 편집 리듬을 잡기 쉽다.

SC03_SH04
길이: 72 frames / 3.0 s / 24 fps
구도: low-angle medium shot
행동: 주인공이 검자루를 잡고 화면 오른쪽의 적을 응시한다
카메라: 35 mm lens, slow dolly in
라이팅: blue moonlight, warm rim light from a burning brazier
제외: text, subtitle, extra fingers, weapon deformation

2. 프롬프트를 ‘문장’이 아니라 샷 명세로 쓴다

좋은 프롬프트는 화려한 형용사보다 촬영 의도를 분리한다. 피사체, 행동, 카메라, 광원, 스타일, 금지 요소 순서로 고정하면 팀원이 결과를 비교하기 쉽다.

A battle-worn fantasy ranger in a ruined stone courtyard at night.
She stops, grips the hilt of her sword, and looks toward an unseen threat off screen right.
Low-angle medium shot, 35 mm lens, slow dolly in, shallow depth of field.
Blue moonlight, warm orange rim light from a distant brazier, realistic game cinematic previsualization.
No text, no subtitles, no extra limbs, no weapon morphing.

캐릭터 일관성이 필요한 경우에는 승인된 콘셉트 아트나 키프레임을 참조 이미지로 사용하고 의상·헤어스타일·소품을 매 샷에서 같은 명칭으로 반복한다. 다만 참조 이미지는 결과를 고정하는 장치가 아니라 방향을 좁히는 장치다. 최종 캐릭터 모델의 정합성은 엔진 안에서 해결해야 한다.

3. 생성본을 편집한 뒤 엔진에서 다시 블로킹한다

생성 결과를 바로 “완성”으로 판단하지 말고 DaVinci Resolve, Premiere Pro 또는 사용하는 편집기에 순서대로 올린다. 임시 음향과 대사를 넣어 컷 길이, 반응 타이밍, 시선 연결을 본다. 이 단계에서 살아남은 샷만 엔진 시퀀스로 옮긴다.

flowchart LR
    A[대본과 콘티] --> B[샷 리스트와 길이]
    B --> C[AI 비디오 생성]
    C --> D[편집 타임라인 검증]
    D -->|승인| E[Unreal Sequencer 또는 Unity Timeline 블로킹]
    D -->|수정| B
    E --> F[애니메이션·라이팅·VFX 최종 제작]

편집 단계에서 컷을 바꾸는 비용은 낮지만 최종 애니메이션 이후에 바꾸는 비용은 높다. 따라서 AI 결과의 품질보다 “이 샷이 필요한가”를 먼저 판정한다.

24fps 편집 타임라인에서 AI 생성 컷신 샷의 길이와 시선 연결을 검토하는 화면

AI 생성 컷신에서 카메라와 라이팅을 어떻게 검증할까?

카메라 이동은 화면상 이동거리보다 피사체 크기 변화와 시선 방향으로 평가한다. 예를 들어 돌리 인 샷은 인물의 화면 점유율이 늘어나야 하며 다음 컷의 시선 방향과 이어져야 한다. 생성 결과가 멋져도 180도 축을 무너뜨리면 실제 편집에서 사용할 수 없다.

샷 간 밝기 차이는 평균 휘도보다 피사체와 배경의 분리로 확인한다. 간단한 검토 지표는 다음처럼 둘 수 있다.

C=\frac{|L_{subject}-L_{background}|}{L_{background}+\epsilon}

여기서 $L_{subject}$ 는 피사체 주변의 대표 휘도, $L_{background}$ 는 배경 휘도, $\epsilon$ 은 0으로 나누는 일을 막는 작은 값이다. 수치 자체를 품질 점수로 쓰기보다는 같은 시퀀스 안에서 주인공이 배경에 묻히는 샷을 찾는 보조 지표로 사용한다.

다음 항목을 컷 리뷰 체크리스트로 고정하면 주관적인 논쟁을 줄일 수 있다.

주인공의 시선 방향이 다음 컷과 연결되는가
화면 안에서 중요한 행동이 한 번에 읽히는가
광원이 장면의 시간대와 감정에 맞는가
생성 오류가 연출을 방해하는가
게임 카메라와 동일하거나 의도적으로 다른가

AI 비디오 생성 툴을 최종 컷신에 바로 써도 될까?

대부분의 게임 프로젝트에서는 바로 쓰기보다 프리비즈, 피치 영상, 내부 연출 검토에 한정하는 편이 현실적이다. 이유는 세 가지다.

연속성 문제: 동일 캐릭터와 소품을 여러 샷에서 완전히 일치시키기 어렵다.
수정 가능성 문제: “왼손만 5cm 올리기” 같은 게임 제작의 국소 수정이 어렵다.
권리와 파이프라인 문제: 서비스 약관, 학습 데이터 관련 정책, 납품 플랫폼의 요구 사항을 프로젝트별로 검토해야 한다.

최종 영상에 AI 결과를 포함할 계획이라면 사용한 서비스, 입력 이미지의 권리, 생성 일자, 프롬프트, 편집 범위를 에셋 관리 기록에 남긴다. 외주와 퍼블리셔 검토가 있는 프로젝트일수록 이 기록이 중요하다.

자주 묻는 질문 (FAQ)

AI 비디오로 만든 컷신을 Unreal Engine에 그대로 넣어도 되나?

가능은 하지만 영상 재생 컷신이 필요한 경우에 한정하는 편이 좋다. 플레이어 선택, 캐릭터 스킨, 로컬라이즈 대사, 실시간 조명이 필요한 컷신은 Sequencer에서 재구성해야 한다.

프롬프트를 길게 쓰면 결과가 더 정확해지나?

항상 그렇지는 않다. 한 샷에 행동과 카메라 지시를 하나씩만 두고 결과가 흔들리면 형용사를 더하는 대신 샷을 분리하는 편이 효과적이다.

어떤 샷부터 AI 프리비즈로 만들면 좋은가?

비용이 큰 샷부터다. 군중, 복잡한 카메라 무브, 대규모 VFX, 감정 표현이 중요한 클로즈업처럼 제작 전에 연출 합의가 필요한 샷이 우선순위다.

정리

Runway 기반 컷신 프로토타이핑의 목표는 완성 영상을 얻는 일이 아니라 제작 전에 잘못된 연출 결정을 버리는 일이다. 샷 리스트를 작게 만들고 생성본을 24 fps 편집 타임라인에서 검증한 뒤 승인된 의도만 게임 엔진의 카메라·애니메이션·라이팅 작업으로 넘기면 AI 비디오를 아트·테크 파이프라인의 실용적인 앞단에 배치할 수 있다.