"— Midjourney у нас дома..."

Как выяснилось, я пока не готов останавливаться, поэтому все рождественские каникулы посвятил тренировке еще двух лор для дополнения ко вселенной Жилзоны: охрененная лора на зомби и красивейшая лора на православные иконы (по традиции, их не будет в свободном доступе.)

Казалось бы! Но без них невозможно было сделать то, что делает MJ с религиозными и хоррор сюжетами. Там это все невидимо при генерации, мне же приходится настраивать воркфлоу с 5 лорами для этого. Но оно того стоит, ибо, по-сути, я получаю тот самый локальный MJ с уже готовыми sref-ами и персонализацией.

Есть и свои минусы.

Первый. Обнаружилось, что насколько Flux отзывчив к обучению, настолько же он и капризен. Возникла проблема в большом числе белых вертикальных линий на генерациях при использовании кастомных лор — как оказалось, проблема известная (но мало изученная), предположительная причина в том, что флаксу нужен для обучения датасет, не содержащий слишком резких контрастных градиентных переходов и мелких деталей, которые характерны для сложностилевых рефов (как хотите, так и понимайте), что по итогу выливается в эти артефакты. Если их мало, то можно убрать в фотошопе через Surface Blur, в моем же случае это привело к дичайшему квесту: сочетание 5 кастомных лор делало картинку чудовищно испорченной. Что делать? Я полез в Fooocus, его апскейлер частично решил проблему линий, но с его минимальными настройками я не вытянул. Но мысль зародилась.

По-итогу, я нашел абсолютно отмороженный форкфлоу для комфи, повторяющий апскейл фокуса, через два рефайнера, с тонкими настройками, который и решил окончательно (надеюсь) проблему с лорами для флакса.

Второй минус — очень большая нагрузка на видеокарту. Рефайн на 4090 одного изображения занимает примерно минуты 3 (апскейл с 1344 до 2560px)

Впереди еще много работы, чтобы максимально закрыть те возможности MJ, которые мне нужны.

Чистые генерации флакса в комментариях.

Жилзона: Концепция · Spotify · Кибераутизм · РассветAI