Практическое применение нейросетей
Раз уж я вошёл в мир нейросетей благодаря реактору (через слитую модель novelAi и гайду к ней), то хочу вернуть дань благодарности этим небольшим мануалом.
Вы сможете генерировать прикольные арты на основе любого логотипа \ текста буквально в пару шагов.
0) Нужен stable diffusion от automatic1111 свежей версии (как его устанавливать тут не буду описывать);
1) Устанавливаем расширение ControlNet:
a) Копируем ссылку: https://github.com/Mikubill/sd-webui-controlnet
b) Идём во вкладку extensions -> install from URL, в первое поле вставляем ссылку и жмакаем install
c) Во вкладке installed на всякий случай проверяем апдейты: "Check for updates", и нажимаем "Apply and restart UI"После этих манипуляций у Вас перезагрузится web страница и появится вкладка "ControlNet" в txt2img:
(Если не появилась, то попробуйте Settings, нажать Apply и перезапустить Stable Diffusion полностью)d) Загружаем модели для ControlNet:
для этого идём сюда: https://civitai.com/models/9251/controlnet-pre-trained-models
скачиваем все версии моделей (там есть раздел Versions с отдельной кнопкой загрузки);
все скачанные файлы закидываем в <путь до SD>\stable-diffusion-webui\extensions\sd-webui-controlnet\models
2) Генерируем арты:
a) подготавливаем свой логотип \ текст.
я сделал такую картинку в фш:
p.s: походу желательно не использовать прозрачный фон (у меня с ним ничего не вышло).
b) двигаем настройки ControlNet:
c) и наконец генерируем (выставляем размер, пишем promptы, жмакаем generate).единственное НО: у меня не получилось подружить controlNet с "hiresfix". даже "latent(nearest)" начинает ломать образ. поэтому генерировал сразу в 768х768 (Вам, возможно, надо будет пробовать с 512х512)
любые LORA, HyperNetwork, embeddings прекрасно работают.модель на которой я генерил: https://civitai.com/models/1274/dreamlike-diffusion-10
ну и примеры того что у меня получилось:
Идея честно спизженна отсюда:
Ну и напоследок хочу сказать что это расширение умеет гораздо большее. например можно полностью копировать стиль фото \ любые позы \ выражения лиц и ДАЖЕ рисовать идеальные руки и ноги (причём с фокусом на них). Но и запариться там нужно чуть сильнее)
Отличный комментарий!