Промптинг в кино с ИИ: что действительно работает

Промптинг для кино — не литературный конкурс. Это проектирование кадра словами, и большая часть мастерства заключается в решении, что вообще должно попасть в промпт. Две ошибки объясняют большинство разочаровывающих генераций: промпт, который описывает чувство и не упоминает камеру, и промпт, который описывает всю сцену целиком, включая всё, что и так видно на референсном изображении, пока у модели не остаётся места для движения. Работающий промпт находится между этими крайностями. Он называет объект, действие, камеру и свет — и на этом останавливается.

Один кадр на один промпт

Каждая генерация должна соответствовать одному кадру, который вы собираетесь монтировать. Видеогайд Runway Gen-4 описывает клипы по пять и десять секунд и советует планировать каждый клип как одну сцену, а не как сжатую последовательность. Это не ограничение, которое нужно обходить; это дисциплина, которая улучшает фильм. Если кадру нужны три отдельных действия, вероятно, это три кадра.

Пишите промпт на языке монтажа. Если вы не можете сказать, что кадр делает для сцены, никакая детализация промпта этого не исправит.

Четыре слота — и остановиться

Надёжный видеопромпт состоит из четырёх слотов, примерно в таком порядке:

1. Объект и действие. Кто в кадре и что он физически делает. Пишите это как одно видимое действие, а не как намерение.
2. Камера. Крупность и движение: средний план, медленный наезд, статичный общий план, ручная камера с проводкой. Эти термины стоит выучить как следует, и справочник камеры у Runway даёт к каждому пример результата.
3. Свет и атмосфера. Направление, качество и цвет: низкое солнце слева за кадром, одна практическая лампа, рассеянный свет в пасмурный день, дымка. Слова о свете меняют изображение сильнее, чем слова о стиле.
4. Стиль и оптика, коротко. Плёнка, зерно, характер оптики, палитра. Одного-двух определений обычно достаточно; абзац прилагательных начинает конкурировать с кадром.

У промпта для изображения задача немного другая. Гайд Runway Gen-4 по изображениям перечисляет объект, сцену, композицию, освещение, цвет, стиль, фокус, угол, текст и настроение как доступные элементы и отмечает, что более полные предложения дают больше контроля, а короткие промпты — больше вариативности. Ни то ни другое не ошибочно. Важно понимать, какой вариант вы выбираете.

Описывать движение, а не фотографию

Когда генерация начинается с исходного изображения, пересказ этого изображения словами обычно уменьшает движение: модель получает одну и ту же информацию дважды и становится осторожной. Рекомендация Runway здесь прямая: используйте текстовый промпт, чтобы описать, что должно двигаться, и упоминайте существующие объекты в общем виде — «объект» или «она». Подробное описание оставьте для элементов, которые вы хотите добавить или изменить.

Именно поэтому лучшие промпты о движении скромны. «Она поворачивает голову к окну, затем опускает взгляд» обычно лучше предложения, которое пытается поставить хореографию на шесть секунд игры. Вы режиссируете один жест, а не сцену.

Говорить, что должно произойти, а не чего быть не должно

Негативные формулировки — ловушка в большинстве современных моделей. Гайды Runway прямо говорят, что негативные промпты не поддерживаются для Gen-4 Image и Video и что описание того, чего не должно появиться, может дать обратный результат. «Без движения камеры» — плохая инструкция; «камера закреплена, объект остаётся неподвижным» — хорошая. «Мужчина без волос» превращается в «лысый мужчина».

Практическое правило: каждое предложение в промпте должно описывать что-то видимое в кадре. Если предложение описывает только отсутствие, перепишите его как присутствие.

Отделять идентичность от стиля

Единообразие рождается из референсов и повторения, а не из более длинных описаний. Современные системы референсов способны удерживать персонажа при разном свете и в разных локациях, а гайд Runway по референсам советует брать за основу чистое, равномерно освещённое изображение с нейтральным выражением и допускает до трёх референсных изображений на одну генерацию. Один референс — для человека, один — для места, один — для цветокоррекции, и они должны оставаться одинаковыми на протяжении всего фильма.

Ведите и письменный лист персонажа: возрастной диапазон, телосложение, волосы, гардероб, две-три отличительные черты. Когда дубль уплывает, сравните его с листом, прежде чем винить модель. Дрейф — это обычно промпт, который тихо изменился.

Вести журнал, который делает дубли повторяемыми

Каждый утверждённый дубль должен быть воспроизводим. Записывайте модель и версию, настройки, референсные изображения, точный промпт и одну строку о том, что изменилось по сравнению с предыдущей попыткой. Это превращает промптинг из игрового автомата в процесс с памятью.

Меняйте по одной переменной за раз. Если вы одновременно меняете камеру, свет и гардероб, из результата вы не узнаете ничего, кроме того, понравилось ли вам. Та же логика работает с сериями: генерируйте варианты, различающиеся в одном измерении, чтобы сравнение было честным.

Промптить под монтаж

Промпт может дать красивый кадр, бесполезный в монтаже. Защита от этого — промптить то, что нужно монтажу: появление, уход, взгляд, раскрытие, реакцию. Движение, которое начинается и заканчивается внутри клипа, монтировать проще, чем движение, которое всё ещё ускоряется на последнем кадре. Статичные кадры достижимы, но их нужно просить прямо и подкреплять, потому что модели созданы для движения.

Если кадр продолжает не получаться, не прокручивайте тот же промпт снова. Измените одну из трёх вещей: промпт (сделайте действие более физическим), референс (усильте идентичность) или кадр (уберите его или разделите на два). Третий вариант забывают чаще всего, и он обычно самый быстрый. Когда промптинг работает, остальную часть процесса описывает пошаговый гайд по первому фильму; когда нет — советы по генерации видео с ИИ разбирают типичные исправления. В любом случае держите промпт настолько коротким, чтобы вы могли произнести его актёру вслух и он понял кадр.