첫 AI 단편 영화: 단계별 워크플로
첫 AI 단편 영화를 위한 실전형 전 과정: 전제, 대본, 숏 리스트, 테스트 숏, 생성 패스, 편집, 사운드, 그리고 영화제 출품용 결과물까지.
모범 사례
영화급 AI 이미지와 영상을 위한 프롬프트 문법: 프롬프트당 숏 하나, 네 칸, 긍정형 표현, 참조 이미지, 그리고 반복 가능한 프롬프트 로그.

영화를 위한 프롬프트 작성은 글쓰기 대회가 아니다. 말로 하는 숏 디자인이고, 기술의 대부분은 애초에 프롬프트에 무엇이 들어가야 하는지를 정하는 데 있다. 실망스러운 생성의 대부분은 두 가지 실패 유형에서 나온다: 감정만 묘사하고 카메라는 언급하지 않는 프롬프트, 그리고 참조 이미지에 이미 보이는 모든 것까지 포함해 장면 전체를 묘사함으로써 모델이 움직일 여지를 남기지 않는 프롬프트. 쓸 만한 프롬프트는 그 사이에 있다. 피사체, 행동, 카메라, 빛을 말하고 멈춘다.
모든 생성은 컷에 넣을 숏 하나에 대응해야 한다. Runway의 Gen-4 영상 가이드는 5초·10초 클립을 설명하며 각 클립을 압축된 시퀀스가 아닌 하나의 장면으로 계획하라고 제안한다. 이는 우회할 제약이 아니라 영화를 좋게 만드는 규율이다. 한 숏에 세 가지 행동이 필요하다면, 그것은 아마 세 개의 숏이다.
편집의 어휘로 프롬프트를 쓴다. 그 숏이 장면에 무엇을 하는지 말할 수 없다면, 프롬프트의 세부가 아무리 많아도 고칠 수 없다.
믿을 만한 영상 프롬프트에는 대략 이 순서로 네 칸이 있다:
이미지 프롬프트는 역할이 조금 다르다. Runway의 Gen-4 이미지 가이드는 피사체, 장면, 구도, 조명, 색, 스타일, 초점, 각도, 텍스트, 무드를 쓸 수 있는 요소로 나열하고, 더 긴 문장은 더 많은 통제를, 짧은 프롬프트는 더 많은 변주를 얻는다고 적는다. 어느 쪽도 틀리지 않다. 중요한 것은 자신이 어느 쪽을 선택하는지 아는 것이다.
입력 이미지에서 생성을 시작하면, 이미지를 말로 다시 서술하는 것이 움직임을 줄이는 경향이 있다: 모델은 같은 정보를 두 번 받고 신중해진다. Runway의 안내는 이 점을 분명히 한다 — 무엇이 움직여야 하는지 설명하고, 기존 피사체는 “피사체”나 “그녀” 같은 일반적인 말로 가리키라. 세부 묘사는 추가하거나 바꾸려는 요소에 남겨 둔다.
최고의 모션 프롬프트가 소박한 이유도 여기에 있다. “그녀가 창 쪽으로 고개를 돌린 뒤 아래를 내려다본다”는 보통 6초의 연기를 안무하려는 문장을 이긴다. 당신은 장면이 아니라 제스처 하나를 연출하는 것이다.
부정형 표현은 대부분의 현재 모델에서 함정이다. Runway 가이드는 Gen-4 이미지와 영상에서 네거티브 프롬프트를 지원하지 않으며, 나타나지 않아야 할 것을 묘사하면 반대 결과가 나올 수 있다고 명시한다. “카메라 움직임 없음”은 나쁜 지시이고, “카메라 고정, 피사체 정지”는 좋은 지시다. “머리카락이 없는 남자”는 “대머리 남자”가 된다.
실용 원칙: 프롬프트의 모든 문장은 프레임 안에서 볼 수 있는 무언가를 묘사해야 한다. 문장이 부재만 묘사한다면 존재로 다시 쓴다.
일관성은 더 긴 묘사가 아니라 참조와 반복에서 온다. 현재 참조 시스템은 조명과 장소를 넘어 캐릭터를 유지할 수 있고, Runway의 References 가이드는 깨끗하고 고르게 조명된 무표정 이미지를 기본으로 쓰라고 권하며 생성당 최대 세 장의 참조 이미지를 허용한다. 인물에 하나, 장소에 하나, 색보정에 하나를 쓰고 영화 전체에서 동일하게 유지한다.
문자로 된 캐릭터 시트도 유지한다: 연령대, 체형, 머리, 의상, 두세 가지 구별되는 특징. 테이크가 흐트러지면 모델을 탓하기 전에 시트와 비교한다. 흐트러짐은 보통 조용히 바뀐 프롬프트 탓이다.
승인된 모든 테이크는 재구성 가능해야 한다. 모델과 버전, 설정, 참조 이미지, 정확한 프롬프트, 이전 시도에서 무엇이 바뀌었는지 한 줄을 기록한다. 이것이 프롬프트 작성을 슬롯머신에서 기억을 가진 프로세스로 바꾼다.
한 번에 변수 하나만 바꾼다. 카메라, 조명, 의상을 함께 바꾸면 결과에서 배우는 것은 좋았는지 여부뿐이다. 같은 논리가 배치에도 적용된다. 비교가 정직하도록 한 차원만 다른 변주를 생성한다.
프롬프트는 컷에서 쓸모없는 아름다운 숏을 만들 수 있다. 편집이 필요로 하는 것을 프롬프트해 예방한다: 입장, 퇴장, 시선, 공개, 반응. 클립 안에서 시작하고 끝나는 움직임은 클립이 멈출 때 아직 가속 중인 움직임보다 컷하기 쉽다. 정지 숏은 가능하지만 분명히 요청하고 강조해야 한다. 모델은 움직이도록 만들어졌기 때문이다.
숏이 계속 실패하면 같은 프롬프트를 계속 굴리지 않는다. 세 가지 중 하나를 바꾼다: 프롬프트(행동을 더 물리적으로), 참조(정체성을 더 강하게), 또는 숏(잘라내거나 둘로 나눈다). 세 번째는 대부분의 영화 제작자가 잊는 선택이며 보통 가장 빠르다. 프롬프트가 잘 작동할 때 나머지 워크플로는 첫 영화 단계별 가이드에 있고, 그렇지 않을 때는 AI 영상 생성 팁이 흔한 해결책을 다룬다. 어느 쪽이든, 배우에게 소리 내어 말해도 그가 이해할 만큼 짧게 프롬프트를 유지한다.