Seedance 2.5 Reference to Video: съёмка от референсов до финального монтажа

Большинство видеомоделей берут одну картинку и одну фразу. Seedance 2.5 Reference to Video принимает целую папку съёмочных материалов: до тридцати картинок, до десяти видеоклипов и до десяти аудиофайлов, плюс промпт, который объясняет, зачем нужен каждый из них. Это руководство проводит через одну съёмку от начала до конца, в том порядке, в каком вы делали бы это на настоящей площадке.

Пример: идея на тридцать секунд, нарезанная на короткие кадры. Курьер на велосипеде пересекает дождливый город в сумерках. Те же шаги подходят для продукта, персонажа или места.

Шаг 1: решите, что не должно меняться

Прежде чем что-то собирать, напишите по одной строке о том, что должно остаться прежним в каждом кадре: лицо и одежда курьера, велосипед, вид улицы. Всё, что вы прикрепите позже, нужно только для защиты одной из этих строк. Если вы не можете сказать, что именно защищает файл, не берите его. Перегруженная папка - самый быстрый путь к мутному результату.

Шаг 2: соберите набор референсов

• Картинки - это актёры. Одно чёткое изображение курьера анфас, одно сбоку, одно с отдельным велосипедом. Простой фон, ровный свет.
• Видео нужно для движения или работы камеры, которые вы хотите позаимствовать: медленный проезд, бег с рук. Суммарная длина всех видео не должна превышать 30 секунд.
• Аудиофайл нужен для голоса, музыки или общего ощущения звука. Суммарная длина всех аудиофайлов тоже не должна превышать 30 секунд.

В форме по умолчанию включены только картинки. Видео и аудио спрятаны в дополнительных настройках, и чтобы модель работала как референсная, нужен хотя бы один референс любого вида. Без них запрос выполняется как обычный текст в видео.

Шаг 3: напишите промпт как съёмочный лист

В промпте каждый файл называется в том порядке, в каком вы его загрузили: @Image 1, @Video 1, @Audio 1, и сразу сказано, для чего он нужен. Дальше описываются сцена, действие, камера и настроение. Думайте как о съёмочном листе: кто в кадре, что делает, где стоит камера.

Шаг 4: выберите настройки

• Длительность от 4 до 30 секунд. Короткие клипы лучше держат сходство. Для длинного фильма разрежьте его на кадры.
• Разрешение: 480p, 720p, 1080p и 4K. Черновики делайте в 480p или 720p, а удачный вариант запустите заново в 1080p или 4K.
• Соотношение сторон: 16:9, 9:16, 4:3, 3:4, 1:1 и 21:9. Выбирайте его до запуска, потому что кадрирование входит в построение сцены.
• Генерация звука включена по умолчанию и даёт клипу родной звук, который следует за картинкой.

Стоимость на странице модели указана для самой дешёвой конфигурации и растёт с длиной и разрешением. Проверяйте её перед длинным или крупным запуском, а черновики тратьте на малых размерах.

Шаг 5: смотрите глазами монтажёра

1. 01Посмотрите один раз без звука. Это тот же человек и тот же велосипед от первого кадра до последнего?
2. 02Посмотрите один раз со звуком. Соответствует ли звук тому, что показывает картинка?
3. 03Назовите одну вещь, которая не так, и меняйте только её. Другой файл или одно предложение.
4. 04Когда всё верно, запустите те же входные данные заново в финальном размере.

О том, как думать о хороших референсах, подробнее в статье референсные изображения для единого стиля. Если нужно провести персонажа через чужую игру, а не сохранить внешний вид, смотрите руководство по Motion Control. А чтобы растянуть историю дальше одного клипа, соберите длинное видео из подходящих клипов.

Чего ждать, если честно

Референс - это сильная подсказка, а не гарантия. Лица и логотипы всё равно могут уплывать в длинном клипе, руки в динамичном действии остаются обычным слабым местом, а промпт, который спорит со своими референсами, проиграет одному из них. Держите клипы короткими, набор референсов небольшим и относитесь к первому результату как к черновику.