У MiniMax H3 есть заметная особенность: когда человек далеко от камеры, лицо в видео может превратиться в нечёткое пятно, а иногда по нему проходит сильный шум. Для таких случаев сделали набор кастомных узлов ComfyUI-H3-FaceRefine. Он обнаруживает лица в видео, расширяет их области, перегенерирует и вклеивает обратно. То есть ролик обрабатывается уже после генерации — пересобирать весь клип не нужно.

Сравнение двух вариантов лица в видео MiniMaxH3 после обработки Face Refine.Источник: note.com

В тесте взяли танцевальное видео в полный рост, созданное в разрешении 544×960. На общем плане лицо расплывалось, а в отдельных кадрах появлялся заметный шум. После FaceRefine ролик стал вполне смотрибельным; обработка заняла около трёх минут — меньше половины времени, которое ушло на генерацию исходного видео. Тут интересно: исправляются только области с лицами, поэтому весь кадр заново не рендерится.

В комплекте есть пример рабочего процесса: нужно загрузить видео и указать референсное изображение и промпт, использованные для его генерации. Предусмотрены два варианта — с автоматическим и ручным обнаружением лица; автор проверил автоматический. Внутри также есть опция вырезать лицо с помощью SAM и заметки по настройкам. Для установки и запуска, по словам автора, достаточно перевести инструкцию на GitHub и посмотреть комментарии в самом workflow.

На клипе из MV «Комореби но Парад» результат оказался скромнее. Лица стали лучше, но если в кадре они совсем маленькие, детализация всё равно ограничена. Ещё при вклейке могут смещаться положение или момент появления лица: в сцене, где персонаж поднимается снизу, оно будто подпрыгивает. Причина такого рассинхрона пока неясна. Короче, FaceRefine пригодится, когда хороший клип уже получился, но лица портят картину — только на совсем крошечных лицах чуда ждать не стоит.

Главное

  • Обрабатывает готовое видео: находит лица, отдельно перегенерирует эти области и вклеивает результат обратно.
  • В примере с роликом 544×960 обработка заняла около трёх минут — меньше половины времени исходной генерации.
  • Доступны автоматическое и ручное обнаружение лиц; также есть опция вырезания области с помощью SAM.
  • Мелкие лица улучшаются ограниченно, а при вклейке иногда возможен заметный сдвиг.

Источникnote #画像生成AI