Рисованием картинок искусственным интеллектом (ИИ) уже никого не удивить, однако компании Stability.AI это удалось: разработчики вывели на рынок программу Stable Diffusion, скачать которую можно с официального сайта. Это нейросеть с открытым исходным кодом для обработки графовых данных слой за слоем.
Что такое Stable Diffusion
Эта сеть не просто генерирует и редактирует изображения по текстовому запросу. В отличие от нейросетей типа MidJourney, полученные в Stable Diffusion иллюстрации не искажаются от изменения размера.
Два кита, на которых держится работа графической сети, – это открытый исходный код и диффузионная модель. Исходные данные нейросети не засекречены, поэтому на основе этой программы можно разработать свое приложение без последствий для репутации и кошелька.
Что касается диффузионной модели, то она на большой скорости просчитывает, какие изменения нужно внести в изображение-образец и что из него нужно удалить. При этом лишние детали программа удаляет не на одном слое, а разбивает изменения картинки на графы и меняет ее поэтапно – в геометрической прогрессии. При этом в граф не вносятся чуждые его текстуре элементы. Программное обеспечение конвертирует их в родной для исходной картинки формат без искажений и шумов.
Преимущества нейросети:
- Устойчивость к шуму и изменениям в данных.
- Обработка графов с топологией.
- Работа с классификацией графов, прогнозированием свойств узлов и поиском сообществ в графах.
У программы есть ограничения. Stable Diffusion не годится для больших графов и многомерных структур.
Требования программы
Так как графическая программа была разработана на основе архитектуры глубоких нейронных сетей, у нее есть особенности и требования к техническому оснащению компьютера:
- Вычислительным ресурсам.
- Данным. Программа требует входных данных в виде изображений, которые будут обрабатываться.
- Разрешению и качеству картинок. Они должны быть высокими. Если планируется ввести наброски, сделанные от руки, стоит поискать другую сеть.
- Модели. Stable Diffusion APP имеет несколько параметров для настройки.
- Алгоритмам оптимизации. В процессе обучения стейбл-дифьюжн-модели задействованы алгоритмы оптимизации для того, чтобы минимизировать потерю качества.
- Контролю переобучения. Иногда у программы бывает перегрузка от переобучения. Модель хорошо работает на обучающей выборке, но плохо на новых данных.
System requirements:
- 16 Gb of RAM;
- Мощный AMD или Intel CPU;
- Nvidia card, 10 Gb of VRAM.
Это минимальные системные требования. Если компьютер им не соответствует, нейросеть не получится поставить или она не будет полноценно работать.
Пошаговая инструкция по установке
Установка desktop нейросети может быть сложной задачей, но с правильной инструкцией это можно сделать легко и быстро.
Скачивание
Чтобы полноценно запустить и пользоваться программой офлайн, нужно ее скачать на ПК.
Основные этапы:
- Скачивание необходимого программного обеспечения. Сначала инсталляция Python и TensorFlow и только потом – нейросети.
- Загрузка диффузионной нейросети с официального репозитория на GitHub.
Установка
Установка программы может занять некоторое время.
Следуйте инструкции, чтобы все прошло без сбоев:
- Обработка файла requirements.txt через installer и команду «pip install-r requirements.txt» перед первым запуском графической модели на компьютере.
- Запуск webui master для работы на local железе, без серверов компании.
- Подготовка данных на Windows. Обработка и преобразование формата поступающей информации.
Донастройка
Программу можно обучить дополнительным алгоритмам, загрузить еще библиотеки и директории. Обучение модели запускается через скрипт train.py из загруженной с программой директории. Или можно использовать команду «nmkd gui ai image generator».
Помните, что стабильность нейронных сетей зависит от скорости обучения (learning rate) и правильной настройки через NKMD. Она не должна быть медленной, иначе программа не подгрузит компоненты, но и высокой, чтобы не возникло проблем с устойчивостью развития нейросети, не снизилось качество.
Также рекомендуется поработать с методами оптимизации Adam и RMSprop, которые обеспечивают стабильность генерации. Используйте руководство для установки нейросети на свой ПК без необходимости использовать ее online-версию. Хотя полноценный интерфейс есть только у веб-версии нейросети.
OrangeMixs – коллаборация Stable Diffusion и Google. Ее также можно попробовать в онлайн-формате.
На каких платформах можно скачать нейросеть
Нейросеть Stable Diffusion скачать можно с GitHub или с официального сайта Stable Diffusion.
