Результаты поиска по запросу "stable diffusion"

Учусь рисовать с помощью Stable Diffusion

Stable Diffusion начала синтезировать музыку

 
В рамках проекта Riffusion разработчики развивают вариант системы машинного обучения Stable Diffusion для генерации музыки вместо изображений. Мелодии можно создавать как на основе предложенного шаблона, так и с помощью текстового описания на естественном языке.
 
,наука,наука и техника,технологии,нейронные сети,Stable diffusion,Stable riffusion,StableRiffusion,Riffusion
 
Компоненты для синтеза музыки написали на языке Python с использованием фреймворка PyTorch. Связь с интерфейсом реализовали на языке TypeScript. Компоненты доступны под лицензией MIT.
Сама модель открыта под лицензией Creative ML OpenRAIL-M, допускающей использование в коммерческих целях.
Обновлённая модель использует для генерации музыки модели «из текста в изображение» и «из изображения в изображение», но в качестве изображений выступают спектрограммы. Они отражают изменение частоты и амплитуды звуковой волны во времени. Система на выходе формирует новую спектрограмму, которая затем преобразуется в звуковое представление.
Проект Riffusion также может использовать для изменения имеющихся композиций и синтеза музыки по образцу. Этот процесс работает по аналогии с модификацией изображений в Stable Diffusion. Так, при генерации могут задаваться образцы спектрограмм с эталонным стилем, комбинироваться разные стили, выполняться плавный переход от одного стиля к другому или вноситься изменения в существующий звук для увеличения громкости отдельных инструментов, изменение ритма и т.д.
Образцы можно использовать для генерации длительно играющих композиций, создаваемых из серии близких друг к другу отрывков, немного меняющихся во времени. Они объединяются в непрерывный поток при помощи интерполяции внутренних параметров модели.
Для создания спектрограммы используется оконное преобразование Фурье. Чтобы решить проблему с определением фазы, задействован алгоритм аппроксимации Гриффина-Лима.
В ноябре Stability AI сообщила о выпуске новой версии модели Stable Diffusion 2.0. В ней улучшили качество и повысили вариативность получаемых изображений.

Отличный комментарий!

Музыканты через 3, 2, 1...
,наука,наука и техника,технологии,нейронные сети,Stable diffusion,Stable riffusion,StableRiffusion,Riffusion

Легкая установка Stable diffusion локально

Существует довольно простой вариант установить Stable diffusion (SD) на ваш компьютер. Даже не надо с консолью ковыряться, все гораздо проще и работает с обширным функционалом.

Итак, инструкция по установке: 

1) Переходим по ссылке: Скачать SD с гитхаба без регистрации и СМС
2) Качаем ZIP архив с интерфейсом. 
Go to file
Add file
Code
\j\j 0 clone	©
HTTPS SSH GitHub CLI
ar https://github.com/AUTOHATICllll/stable-d:	[□
^ Use Git or checkout with SVN using the web URL.
CJp Open with GitHub Desktop
in i
if) Download ZIP
pnt
?0 hours ann,Stable diffusion,нейросети,нейроарт,art,арт
3) Распаковываем архив на свой компьютер туда где есть место. Потребуется где то 10 гб.
4) Скачиваем сам файл с SD (а если быть точным - веса) по ссылке или же через торрент:
magnet:?xt=urn:btih:3a4a612d75ed088ea542acac52f9f45987488d1c&dn=sd-v1-4.ckpt&tr=udp%3a%2f%2ftracker.openbittorrent.com%3a6969%2fannounce&tr=udp%3a%2f%2ftracker.opentrackr.org%3a1337
5) Есть такие штуки как GPFGAN - приблуда для исправления лиц и ESRGAN - приблуда для апскейла картинок. Я с ними еще не разбирался, а если и запускал то они плоховато работали, так что пояснения с их работой и установкой будут в следующих постах. (Но кто хочет - может поставить сам поиграться).
6) Теперь ставим проги для того чтобы все работало: GIT и Python версии 3.10.6. Python нужно устанавливать с галочкой "Add Python to PATH".
А также в ридми было указано поставить CUDA. Зачем я конечно не знаю, но я поставил на всякий случай. 
7) Перекидываем наш файлик из пункта 4 в папку из пункта 1, т.е. переименовываем файл в model.ckpt и размещаем в stable-diffusion-webui-master. 
К model, ckpt	05.09.2022 21:28	Файл "CKPT'	4165411 КБ
К README.txt	07.09.2022 15:30	Текстовый докум...	11 КБ
К requirements.txt	07.09.2022 15:30	Текстовый докум...	1 КБ
К requirements_versions.txt	07.09.2022 15:30	Текстовый докум...	1 КБ
В screenshot.png	07.09.2022 15:30	Файл "PNG"	513 КБ
Щ
8) Запускаем webui.bat. Должна начаться загрузка требуемых данных для работы. У меня потребовалось перезагрузить комп, чтобы все программы встроились в систему. 
9) Переходим в браузер по адресу http://127.0.0.1:7860/ и играемся. 
Вроде ничего не забыл, если что - пищите. 
В следующих постах постараюсь подробно расписать то как в ней работать. 

Получил доступ к закрытой бете Stable Diffusion! Пишите запросы.

Готов сгенерировать вам почти всё что захотите. Только пишите сразу на английском.
Пример: "Studio photograph of a suit of armor made of white porcelain with blue trim. 8k."
,нейросеть,StableDiffusion
Ниже просто интересные генерации, которые нашёл за минуту.
эп1ШТООД1О0,нейросеть,StableDiffusion
,нейросеть,StableDiffusion
,нейросеть,StableDiffusion
,Гостья из будущего,Фильмы,Алиса Селезнева,нейронные сети,Stable diffusion

Отличный комментарий!

,Гостья из будущего,Фильмы,Алиса Селезнева,нейронные сети,Stable diffusion
Хочется узнать позицию администрации (и всех неравнодушных) по поводу правильного проставления тегов для захлестнувшего реактор цунами нейроартов. А то наделали миллиард тегов и теперь вроде как надо ставить их все, чтобы люди, которые подписались только на "нейроарт" тоже увидели картинку, сделанную при помощи нейросети, потому что другой реакторчанин, например, ставил только "нейромазню" и там тоже есть подписчики. Есть ли смысл в тегах "stable diffusion" и "novelAI", которые, фактически, слились в один? Или может лучше их оставить для новостей, а арты туда не ставить. Короче, это надо брать под контроль как можно раньше, иначе начнётся пиздец.

Генерация изображений на Stable Diffusion

Предыдущая часть в которой была описана установка нейросети Stable Diffusion локально здесь.
Тут покажу как какие настройки влияют на генерацию изображений. 
Итак вы установили SD себе на комп и уже знатно наигрались сгенерировав разные пейзажи, людей, котиков и котиколюдей, хорошо. Но за что отвечают разные ползунки которые находятся в меню? 

1. Prompt
Собственно в этой окошке вы заказываете себе то, что хотите увидеть. Здесь можно написать любой запрос и его модификаторы. Собственно самый простой и при этом же самый сложный параметр. Как правильно писать модификаторы будет отдельный пост. 
2. Sampling Steps
Данная характеристика показывает сколько шагов будет в генерации. Чем меньше - тем хуже. Но, если сделать 50-100-150 шагов то качество невероятное не получится. Просто усложнится сам объект. 
Для 512х512 хватает 15-20 шагов. Примеры ниже: 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
 
,Stable diffusion,нейросети,нейроарт,art,арт
А на сегодня пока что все. Завтра будет продолжение по настройке. 
Всем привет. Решил я тут запилить в нейронках скрипт, который будет рисованного 2d персонажа максимально похоже отрисовывать в реалистичных фактурах. Без моего вмешательства руками.
По зарубежным персонажам я прогулялся вот в этой подборке
,Stable diffusion,нейронные сети,нейроарт,фандомы,Римма Свекольникова
А тут я решил попробовать наших персонажей покрутить.
При выборе хорошеньких лиц - получаются хорошенькие результаты. Но кто ищет легких путей? Вот вам одна знакомая всем с детства женщина =)
Принцип простой - закинул скриншот из мультика, получил нечто. Максимально стараюсь сохранить пропорции, а потому такие странные получаются образы.
,Stable diffusion,нейронные сети,нейроарт,фандомы,Римма Свекольникова
Ну и артефакты не чистил, чтобы показать насколько справляется сам скрипт. Если надо прям конфетку вылизывать, на это нужно много времени, это ради одного арта можно. Тут же я попытался передать насколько Римма хороша и модна сама по себе!
PS. А вот в современной отрисовке (В спортивном костюме нередко, судя по скриншотам) она уже скучная какая-то. Мне не нравится.
Здесь мы собираем самые интересные картинки, арты, комиксы, мемасики по теме stable diffusion (+1000 постов - stable diffusion)