ИИ из сценария в анимацию: превратите сцену в видео

Сценарный формат существует, чтобы передавать изображения. Слаглайн вроде «ИНТ. ЗАКУСОЧНАЯ — НОЧЬ» закрепляет место, интерьер и время суток ещё до того, как ляжет первое слово действия. Следующий за ним блок действия написан в настоящем времени и описывает ровно то, что происходит на экране, и ничего, чего там нет. Это не случайность — сценарии намеренно ограничены видимым, и именно поэтому они на редкость хороший материал для модели, превращающей описание в движущиеся кадры.

А значит, самая трудная часть работы с промптом зачастую уже сделана. Вместо того чтобы придумывать кадр с нуля, у вас есть сцена, где названы пространство, персонажи и центральное действие. Возьмите один слаглайн вместе с его блоком действия, отнеситесь к нему как к одному описанию кадра — и материал для генерации готов. Мастерство в том, чтобы выбрать, какой бит вычленить, и урезать его до той части, которую камера действительно ловит.

Рендерится именно то, что относится к действию и описанию. «Женщина распахивает дверь закусочной, стряхивая дождь с пальто» — это то, что модель может выставить, закадрировать и осветить. Диалог же — не изображение: слова, которые произносит персонаж, на экране не появляются, и страница реплик туда-сюда почти ничего не даёт видеомодели для отрисовки. Ремарки вроде «(пауза)» или «(сухо)» — это актёрские пометки для живого исполнителя, а не описание кадра, поэтому они тоже переносятся плохо.

Практичный ход — отделить видимое от произносимого. Оставьте действие — кто движется, как, где, при каком свете — и отложите диалог и ремарки в сторону, если только они не подразумевают физический жест, который можно описать. «(с грохотом ставит кружку)» стоит сохранить, потому что здесь названо действие; «(саркастически)» — нет, потому что камере тут нечего показать. Переведите бит в то, как выглядит кадр, и пусть игра живёт в вашем воображении, а не в промпте.

Начните с одного слаглайна и его блока действия, а затем перепишите его как единый кадр: одно место, один момент, одно ясное центральное действие. «НАТ. КРЫША — РАССВЕТ. Мара одолевает последнюю перекладину и встаёт на фоне бледного неба» превращается в «Женщина подтягивается на бетонную крышу в первом свете дня и встаёт лицом к бледному безоблачному небу, ветер треплет её куртку». Конкретика всякий раз бьёт абстракцию — описывайте свет, погоду, фактуру, направление движения, то, что зафиксировал бы объектив.

Сдержите порыв запихнуть всю сцену в одну генерацию. Если ваш блок действия охватывает три вещи, происходящие по очереди, — это три кадра, а не один; попытка отрендерить их разом мутит каждый. Вычлените самый сильный момент, опишите его без прикрас и сгенерируйте. Если деталь вышла не той, вы не переснимаете — вы правите описывающее её предложение и запускаете снова. Итерация — это строка текста, и потому конкретные, видимые камерой формулировки окупаются так быстро.

Череда кадров читается как одна сцена только тогда, когда куски сходятся. Переходя от кадра к кадру, тащите за собой одни и те же опорные детали: внешность и костюм персонажа, место, время суток, свет, общий стиль. Если ваш первый кадр описывает «женщину в промокшем под дождём зелёном пальто под натриевыми фонарями», следующий кадр должен повторить эту конкретику, а не полагаться на то, что модель её помнит. Каждая генерация — отдельный момент, поэтому непрерывность живёт в словах, которые вы переиспользуете.

Определите заранее небольшой словарь стиля — облик, палитру, характер оптики, настроение — и применяйте его к каждому кадру, удерживая неизменным на протяжении сцены. Смена костюма, погоды или визуальной грамматики между кадрами — как раз то, из-за чего последовательность ощущается набором разрозненных клипов, а не одной непрерывной сценой. Относитесь к повторяющемуся описанию как к шаблону, который вы вставляете и слегка правите, а не переписываете каждый раз заново.

Как только вы научитесь стабильно получать один кадр, который вам нравится, их сцепление и есть путь, которым сценарий становится анимационной последовательностью. Пройдите свою сцену бит за битом, сгенерируйте кадр для каждого и расставьте по порядку — вы собрали аниматик, который показывает сцену в движении, а не просто описанной на бумаге. Для аниматоров и художников раскадровки это быстрый способ проверить ритм и мизансцену до того, как вкладываться в полный производственный конвейер.

Начинать с чистого листа не обязательно. Полистайте каталог готовых сцен, найдите близкую к задуманному биту и используйте её как отправную точку в потоке создания — а затем подгоняйте описание под свой сценарий. Отредактировать сильную стартовую сцену часто быстрее, чем писать вхолодную, и, поскольку любая доработка — это лишь смена предложения, попробовать другую версию кадра стоит почти ничего.