Креаторка, готовившая клип для AICU, показала на одном эпизоде Seedance: героиня у воды пошла через реку, хотя промпт велел идти к скале. Если стартовый кадр подсказывает модели неверный маршрут, одними словами это не исправить — можно потерять время и видеокредиты.

Кадр с героиней у горной реки и велосипедом — пример результата генерации Seedance.Источник: note.com

В заметке на японской платформе note авторка рассказывает, как пересобирала MV7 «夏のまんなかで» в короткий фильм без песни. Для новой сцены ей нужно было, чтобы Мирай слезла с велосипеда и пошла к большому камню, не снимая футляр с трубой. Один и тот же промпт она дала GPT Image и Seedream — генератору изображений от той же компании, что делает Seedance. Для этого кадра Seedream показался ей лучше приспособленным к анимации; это наблюдение по одной сцене, не общий рейтинг моделей.

Но при генерации видео героиня не пошла к камню: она ступила по речным камням и перебралась на другой берег. При пересмотре стало понятно почему — на первом изображении девушка стояла слишком близко к воде, а впереди была река. Картинка фактически подсказывала направление «перейти», и текстовая команда проиграла.

Креаторка отодвинула героиню к велосипеду, дальше от берега, а большой камень поставила перед ней, реку — за ним. Новый кадр Seedream уже повёл видео в нужную сторону: девушка пошла к скале. Статичную картинку исправить дешевле, чем неудачную генерацию видео — и в кредитах, и во времени. Так что первый кадр стоит собирать не только как красивую иллюстрацию: он уже задаёт модели, куда двигаться.

Источникnote #画像生成AI