LoRA — небольшой файл, который подключают к чекпойнту, чтобы менять стиль или детализацию, не заменяя саму модель. Для теста автор взял пять популярных вариантов на Civitai: Detail Tweaker, Add More Details, blindbox, MoXin и Doll Likeness. Файлы весят от 9 до 144 МБ — для сравнения, чекпойнт занимает около 2 ГБ.

Аниме-персонаж с лупой рядом с японской надписью о снижении силы LoRA и необычном результате.Источник: note.com

В ComfyUI к прежнему воркфлоу из семи нод добавили Load LoRA: через него пропустили модель и CLIP, а значения силы модели и CLIP выставляли одинаковыми. Сначала каждый вариант запускали на силе 1.0, не меняя промпт и Seed. Генерации делали на Hassaku (SD1.5) v1.3 в размере 512×768.

Результаты разошлись. Первые две LoRA добавили теней и складок на одежде; Add More Details автору понравилась сама по себе, хотя стиль не совпал с референсом. blindbox превратил персонажа в фигурку с большой головой и белым фоном, MoXin сильно изменил внешность, а Doll Likeness не сделал лицо фотореалистичным. У последней сработало указанное на странице модели триггер-слово: фигура стала выше и взрослее. Для blindbox оно почти ничего не изменило — возможно, нужное слово уже было в промпте.

Затем меняли только силу LoRA. Detail Tweaker проверили на значениях от -2 до 2: плюс усиливал блеск волос, складки и тени, минус убирал линии и уплощал заливку. blindbox становился заметнее при повышении силы, а MoXin на 0.4 оставлял персонажа прежним, меняя линии на похожие на мазки кисти. В финале blindbox совместили с IP-Adapter Plus силой 0.7: референс сохранил одежду и волосы, а LoRA добавила большую голову и иногда подставку. Тут интересно: популярные LoRA заметно меняют картинку, но к нужному образу приблизили лишь blindbox и Detail Tweaker на отрицательной силе. Думаю, подбирать их всё равно придётся под конкретную задачу. Короче, цифра силы — часть эксперимента, а не настройка «поставил и забыл».

Главное

  • Detail Tweaker: сила от -2 до 2; отрицательное значение уменьшает детализацию и число линий.
  • Для blindbox сравнили 0.4, 0.7, 1.0 и 1.5; при 1.5 образ стал более размытым.
  • Для MoXin автор советует учитывать рекомендацию страницы модели: сила не выше 0.85.
  • LoRA удалось подключить вместе с IP-Adapter Plus; в этой связке сильнее проявился референс.
  • Воркфлоу для ComfyUI — прежние семь нод плюс Load LoRA; модели в него не включены.

Источникnote #画像生成AI