Автор публикации на note выложил полный набор промптов для клипа Noctia «Future of Hope»: MiniMax H3 сгенерировала 14 фрагментов. Для тех, кто делает видео с ИИ, это возможность посмотреть не только на результат, но и на подробную режиссуру по отдельным клипам.

Заголовок на японском сообщает о создании трёхминутного клипа Noctia «Future of Hope» по промптам Muse с помощью MiniMax H3.Источник: note.com

Промпты создала Meta AI Muse. Сначала креатор передал ей трек, который сделал в Studio One 7, а затем добавил к нему вокал через SUNO. Muse подготовила инструкции для MiniMax H3 в ComfyUI с рабочим процессом newMusicVideo. Генерация шла локально на RTX 4070 Ti SUPER.

Каждый фрагмент рассчитан на 15 секунд при 24 кадрах в секунду — по 362 кадра. Для склейки Muse также задала перекрытие в 22 кадра и задержку в 15 кадров. Сюжет развивается от стилизованных растений и окна с тёплым светом к комнате, которую заполняют цветы и лепестки. В финале остаются закрытый синий цветок и почти неподвижный кадр.

Самое полезное — в промптах видны правки после неудачных генераций. Геометрический узор выглядел как плитка, колокольчик слишком долго просто качался, а намёки на звёзды и небо превратили сцену в таймлапс с солнцем и луной. Формулировки переписывали, чтобы растения читались как растения, а события менялись в нужную сторону. Это хорошая база для разбора, но не доказательство, что те же промпты так же сработают у всех.

Источникnote #動画生成AI