Важно знать перед началом
Перед началом генерации, не мешало бы знать следующие вещи:
Модели
Модели, они же чекпоинты. По факту файл с "памятью" нейросети в зависимости от которого полносью меняется качество и внешний вид генераций. Может иметь два формата:
.ckpt
- чисто гипотетически в него возможно засунуть вирус, правда, пока никто этого не делал. Качать можно, но лучше не делать этого с сомнительных сайтов..safetensors
- загружается быстрее, и записать туда вирус уже даже в теории не выйдет. Их можно вообще спокойно использовать.
Где искать модели
Есть несколько вариантов:
VAE
Вариационные автоэнкодеры
, или в переводе на понятный язык штуки, которые могут пофиксить некоторые проблемы с генерацией. Например тусклые и невзрачные цвета. Хранятся в форматах .pt, лежат в одной папке с моделями. Для автоматической загрузки вае с моделями он должен называтся {название файла модели}.vae.pt
Обычно VAE можно найти в репозитории модели на huggingface, или использовать свой. Лично я юзаю vae-ft-mse-840000-ema-pruned.vae.pt
Настраивается в настройках, во вкладке Stable Diffusion
(пункт SD VAE
)
Не всем моделям нужен VAE, в некоторых из них он "запечен" внутрь. Также некоторые VAE могут не подходить под конкретные модели и вы будете получать перенасыщенные цвета, так что предлагаю добавить VAE в быстрые настройки (наверху, рядом с сменой модели), так просто будет удобнее выбирать подходящий VAE.
Как это сделать
Settings > User Interface > Quicksettings list
Через запятую от sd_model_checkpoint
добавляем sd_vae
, после чего нажимаем Apply settings
и Reload UI
Готово.
CLIP Skip
Ползунок в настройках, который управляет тем, как рано должна быть остановлена обработка запроса сетью CLIP.
КОРОЧЕ
Все что нам тут нужно, это тот факт что при использовании моделей по типу NovelAi, Anything и им подобных, для получения лучших результатов он должен быть на значении 2
. Остальным моделям обычно одинаково, так что можно просто установить его на 2
и не трогать.
Идем по пути
Settings > Stable Diffusion
Находим Clip skip
устанавливаем его на 2, после чего нажимаем Apply settings
.