Fizgig 9.3.0 получил режим, который показывает тепловые карты LoRA прямо во время обучения: видно, какие области модель уже выучила, какие пока нет и где она «течёт» на соседние участки. Релиз выложил пользователь Reddit shootthesound в r/StableDiffusion, код открыт на GitHub.

Источник: github.com

Обычно LoRA оценивают по готовым картинкам: сгенерировал, посмотрел, понял, что не так, и гонишь обучение заново. Если карты действительно показывают прогресс по ходу, ошибку в датасете или переобучение можно поймать раньше, а не после нескольких часов расчёта.

Что именно видно. По описанию в посте карты делятся на три типа: выученное, невыученное и утечки. Выученное — то, что модель уже уверенно воспроизводит. Невыученное — пробелы, до которых обучение пока не дотянулось. Утечки — места, где признаки LoRA просачиваются туда, где им быть не надо. Как именно карты считаются и на каких моделях работают, из поста не видно, это разобрано в документации TRAINING_MAPS.md в репозитории.

Открытый код полезен тем, кто хочет понять, как устроен процесс, а не просто доверять готовому результату. Но это инструмент диагностики, а не магия: карта подсказывает, куда смотреть, а решение по датасету и настройкам всё равно за вами.

Вывод простой: раньше LoRA обучалась почти вслепую между чекпоинтами, теперь можно хотя бы заглянуть внутрь. Если у вас LoRA что-то косячит и непонятно почему, это стоит проверить.

ИсточникReddit: AI-видео и картинки