#арт

Тестировал новую модель Хачатура (XpucT) с дерзким названием "Anime" во время закрытой беты.

Мне понравилось как модель рисует людей, даже немного порисовал всяких аниме-девчуль, чего обычно не делаю.
Даже выложил рисунок на Civitai, лайки сами себя не нафармят.

Разбираюсь с тем, как правильно промптить пейзажи и абстракции, после чего напишу обзор в двух частях: расскажу о модели и о своём опыте.

Внимательно посмотрите на промпты референсных работ. Если короткие негативы дают такой результат, то может быть, и не надо писать негативы на три чанка с ворохом эмбеддингов?

ДОПОЛНЕНО ПО МОТИВАМ ДИСКУССИИ В КОММЕНТАРИЯХ (УЖЕ УДАЛЁННОЙ)
Мне не интересны все эти прохладные истории про то, что Хачатур украл и переименовал мейну. Хотел бы украсть — украл бы как-то изящнее, его технических знаний хватит. И тем более не заморачивался бы со сбором колоссального датасета и дообучением.
Если вам недостаточно плашки "Type: Checkpoint Merge", то вам и информация про дообучение и прочие подробности не нужны.

На civitai потёрли все подобные каменты, а каких-то чудаков даже вжбанили.

Здесь будет то же самое: чистота и порядок в комментариях. Хотите что-то кому-то доказать — делайте это в другом месте.
___
Stable Diffusion: инструменты, расширения, модели, токены

#токен #заметки

Hires. fix можно использовать как инструмент ленивого инпейнта анатомии если вы видите, что диффузия сможет перетянуть конечности одну в другую при достаточном уровне денойза.

По моему скромному (пока) опыту приемлемый результат с сохранением композиции получается на денойзе в диапазоне от 0.65 до 0.72 при значительных проблемах с анатомией (как на обложке), и в диапазоне от 0.5 до 0.6 при незначительных проблемах.
Иногда даже удаётся поправить пальцы!

Но для этого вам необходимо использовать негатив, нацеленный на улучшение анатомии. Иначе трюк может не сработать.

Универсальный, подходит для любых стилей, предпочтителен для фотореализма

(deformed, distorted, disfigured:1.3), poorly drawn, bad anatomy, wrong anatomy, extra limb, missing limb, floating limbs, (mutated hands and fingers:1.4), disconnected limbs, mutation, mutated, ugly, disgusting, blurry, amputation

Для фотореалистичных изображений ("фотографий")

(deformed, distorted, disfigured, doll:1.3), poorly drawn, bad anatomy, wrong anatomy, extra limb, missing limb, floating limbs, (mutated hands and fingers:1.4), disconnected limbs, mutation, mutated, ugly, disgusting, blurry, amputation, 3d, illustration, cartoon

Аниме

(worst quality, low quality, mutated hands and fingers, bad anatomy, wrong anatomy, ugly, mutation:1.2)

Добавление в этот негатив токена (monochrome:0.7) добавит цветастости изображению.

Серия постов
1. Включаем дополнительные настройки Hires. fix
2. Исправляем анатомию с помощью Hires. fix
3. Пример повышения детализации изображения на семплере Heun при Hires. fix
____
Stable Diffusion: инструменты, расширения, модели, токены

#заметки

В комментариях попросили рассказать как включить дополнительные настройки Hires. fix, чтобы у вас была возможность увеличивать картинку на другом семплере и задать промпт и негатив, отличные от исходной генерации.

Дополнительные Hires fix настройки включаются в Settings - User Interface.

Hires fix: show hires sampler selection
Добавляет выбор семплера для хайреза. По умолчанию используется тот же семплер, что и при рисовании. Настройка пригодится если вы хотите доработать детали на другом семплере.
— (любой семплер) + Heun = повышение детализации изображения;
— DPM++ 2M/2Sa + DPM++ 2M Karras = улучшение картинки для большего фотореализма.

Hires fix: show hires prompt and negative prompt
Добавляет возможность задать промпт и негатив для хайреза, которые будут отличаться от вашего основного промпта. Возможные сценарии:
— изменение силы лоры, если вам не нравится результат после хайреза;
— добавление токенов детализации или повышение их веса;
— цветокоррекция (чуть-чуть) при достаточной силе токенов цвета.

Дополнено: версия Automatic WebUI должна быть 1.3.0 или выше.

Серия постов
1. Включаем дополнительные настройки Hires. fix
2. Исправляем анатомию с помощью Hires. fix
3. Пример повышения детализации изображения на семплере Heun при Hires. fix

____
Stable Diffusion: инструменты, расширения, модели, токены

#заметки #ComfyUI

Ранее не сталкивался с информацией о том, как движок Automatic1111 обрабатывает веса токенов, но узнал про это из справки ComfyUI.

╮( ˘ ､ ˘ )╭

ComfyUI использует веса токенов строго в соответствии с промптом:

(masterpiece:1.2) (best:1.3) (quality:1.4) girl

Automatic1111 постарается нормализовать веса исходя из общего количества токенов:

(masterpiece:0.98) (best:1.06) (quality:1.14) (girl:0.81)

Эта информация может пригодится при работе с длинными промптами в 2-4 чанка (150-300 токенов). Вместо тщетных попыток повышать веса ключевых токенов до невероятных 1.6-1.7 стоит поднимать веса остальных токенов, чтобы при нормализации весов всего промпта веса ключевых токенов теряли меньше силы.

Дополнено: длинное обсуждение механизма работы с весами токенов.
____
Stable Diffusion: инструменты, расширения, модели, токены

Не ожидал, что мой скромный канал про капибар за два месяца наберёт тысячу читателей.

Огромное вам спасибо!

По сложившейся в телеграм-сообществе традиции делюсь каналами о Stable Diffsuion, которые регулярно читаю:

@win10tweaker
Лучшие в рунете авторские материалы о работе со Stable Diffusion. Невероятное сообщество, особенно клуб платных подписчиков.
Вы многое теряете, если ещё не подписаны на ютуб и дискорд.

www.youtube.com/@StableDiff
Отличные видео-уроки. Глубоко переработанная компиляция накопленного в сообществе опыта. У канала есть расширитель в виде сообщества в телеграме.

@mrreplicart
Авторский канал о технических аспектах Stable Diffusion. Пишет, увы, редко.

@neuro_yiu
Ещё один авторский канал, но уже больше про создание красоты и стилей. И тоже пишет редко.

@GreenNeuralRobots
Новостной канал. Агрегирует всевозможные инфоповоды из сети, связанные с генеративным AI. По демо и прототипам можно представить где мы будем через год-полтора.

И не могу не поделиться двумя каналами о русском дизайне. К нейросетям они отношения не имеют. Но так ли это важно, если каналы хорошие?

@neohota
Дайджест русского дизайна, в самом широком значении термина "дизайн": диджитал, веб, предметный, интерьеры, архитектура, одежда. Список бесконечен.

@sdelanovross
Под классическим лозунгом "support your local clothing brand" пишут о русских брендах одежды.

#заметки

Как избавиться от постороннего текста при генерации изображений?

Длительное время использовал в негативном промпте конструкцию text, signature, watermark, чтобы при генерации избавиться от надписей и подписей. После тестов выяснилось, что при обычных весах конструкция лишь уменьшает простор фантазии модели. Надписи остаются.

Повышение веса до 1.3-1.4 сокращает количество текста на изображениях (в среднем), но начинает оказывать влияние на детали. Иногда в лучшую сторону, иногда в худшую.

Проще не пытаться переубедить диффузию, а вручную почистить подписи. Это займёт пару минут, в большинстве случаев хватает одного прохода. Иногда диффузия перерисовывает крупную подпись в небольшую, и тогда потребуется два-три прохода, чтобы устранить недоразумение.

Процесс и настройки удаления постороннего текста такие же, как и при удалении любой другой мелкой детали.

1. Переносите изображение в img2img - inpaint, закрашиваете текст маской.
2. Задаёте настройки инпейнта так, чтобы полностью перерисовать часть изображения под маской. Промпт и негатив остаются пустыми.
• Mask mode: Inpaint masked
• Masked content: original
• Inpaint area: Only masked
• Only masked padding, pixels: 64
• Sampling steps: 20
• Denoising strength: 1
• Размер: 512х512 (или меньше, по желанию)


____
Stable Diffusion: инструменты, расширения, модели, токены

#токен

371 стиль художников и режиссёров. Протестировано на Midjourney, но должно работать и в Stable Diffusion.
https://docs.google.com/spreadsheets/d/16KKh1FQmd-r98K9aWPBux5m9lc9PCV_T1AWgU54qXm8/edit#gid=0

Зачем я снова и снова публикую подборки токенов стилей? Причин две:
1. Не у всех есть терпение и желание рисовать гриды на тысячи рисунков. А пополнять ассортимент стилей надо. Подборки — самый простой способ получить желаемое.
2. Результаты каждого теста уникальны. В одном тесте токен не проявил себя, в другом выдал лучший результат и обратил на себя внимание.


Все посты с подборками стилей.

_____
Stable Diffusion: инструменты, расширения, модели, токены

#дайджест #токен

Все подборки токенов стилей художников, фотографов или инструментов рисования в одном посте (будет постоянно обновляться).

• Подборка из 1572 художников
• 2384 стиля Midjourney, которые поймёт Stable Diffusion
• 706 художников, 33 стиля, 19 направлений
• 364 плёнки для имитации стиля аналоговой фотографии
• 371 стиль фотографов и режиссёров
• 264 техники рисования, 1800 имён художников, 400 фотографов, 100 промптов с фильтрами для фото

Зачем я снова и снова публикую подборки токенов стилей? Причин две:
1. Не у всех есть терпение и желание рисовать гриды на тысячи рисунков. А пополнять ассортимент стилей надо. Подборки — самый простой способ получить желаемое.
2. Результаты каждого теста уникальны. В одном тесте токен не проявил себя, в другом выдал лучший результат и обратил на себя внимание.

____
У капибары лапки • подписаться

#заметки #рабочийпроцесс

Последние пару дней тестирую различные промпты и негативы для улучшения результатов на разных аниме моделях.

Самый интересный вывод: общепринятые и очень популярные (masterpiece, best quality), даже с повышением веса до 1.3, не улучшают картинку. С тем же успехом можно добавить в промпт пару запятых, это тоже как-то поменяет детали или композицию.

При этом негатив (worst quality, low quality) результаты улучшает. Можно даже повышать вес до 1.3-1.4.

magic
╮( ˘_˘ )╭

____
У капибары лапки • подписаться