В 50 из 51 подписей к обучающим изображениям были имена персонажей Genshin Impact — и это оказалось причиной, почему на картинках с несколькими героями «гавкание» усиливалось. Так автор японского цикла об Anima LoRA описывает грязные полосы и пятна на ровных поверхностях: небо, одежда и диван словно распадаются.
Сначала автор проверил более лёгкий вариант: убрал из LoRA cross-attention — часть, связывающую текст промпта с изображением. Стало немного лучше, но проблема осталась, а качество картинки просело. Тогда он переобучил LoRA на тех же 51 изображениях и с теми же настройками, изменив только подписи: имена заменил описаниями внешности, а игровые названия мест — общими словами вроде «европейская улица».
Результат совпал с гипотезой: если добавить имя героя уже в промпт, несколько персонажей больше не усиливают артефакты. Но пятна на ровных участках никуда не делись — значит, имена влияли на дополнительное ухудшение, а не были корнем проблемы. Разницу в самих картинках трудно рассмотреть на отдельных примерах; этот вывод автор сделал по впечатлению от использования в разных сценах. Думаю, это важная оговорка, а не мелкий шрифт.
У метода обнаружились побочные эффекты. В оригинальных костюмах лучше стали видны узоры и детали, зато игровые логотипы на дальних планах встречались чаще: в тесте — на 3 из 4 изображений вместо 1 из 4. А у нового персонажа заданный каштановый цвет волос смещался в рыжий или оранжевый. Для стилевой LoRA правило простое: не привязывать подписи к именам, если нужно выучить именно рисунок. А источник «гавкания» автор ищет дальше — теперь сравнит настройки обучения с Flat Anime Style.
Источникnote #画像生成AI
