— локальные «чистые» версии SD,
— «закрытые» версии Stable Diffusion со Stable Diffusion 3.
Стабильность прогресса
Stable Diffusion стала популярной генеративной моделью, но у неё были свои особенности. В частности, она требовала много вычислительных ресурсов и могла давать непредсказуемые результаты. Поэтому разработчики стали создавать облегчённые версии Stable Diffusion для домашних компьютеров.
Первое поколение модели было выпущено в мае 2022 года. У него был открытый исходный код, и его можно было установить на свой компьютер. Однако для работы с ним требовался мощный графический процессор.
Второе поколение модели вышло в ноябре 2022 и было основано на архитектуре DDIM. Оно также было с открытым исходным кодом, но было оптимизировано для домашнего использования.
Третье поколение Stable Diffusion было объявлено в феврале 2024. Оно было разработано Stability AI, коммерческой компанией, которая купила исходный код Stable Diffusion у Stability Diffusion Inc. в январе 2023 года. Обновилась и лицензия: Stable Diffusion теперь можно использовать только для обучения, оценки и исследований.
Stable Diffusion предназначен для создания изображений на основе текстовых запросов. Это означает, что пользователь может предоставить модели текст, описывающий изображение, которое он хочет получить, и модель создаст для него изображение.
Например, если пользователь хочет создать изображение кота, он может попросить модель создать «кошку с голубыми глазами, сидящую на диване». Модель будет использовать это описание для генерации изображения.
Однако Stable Diffusion не всегда создаёт реалистичные изображения. Иногда модель может создавать изображения, которые выглядят странно или даже пугающе.
Вот некоторые из проблем, которые могут возникнуть при использовании Stable Diffusion:
1. Несоответствие запроса и изображения. Иногда модель создаёт изображение, которое не соответствует тексту запроса. Например, модель может создать изображение кошки с крыльями или человека с головой животного.
2. Искажённое восприятие. Иногда модель может исказить восприятие запроса. Например, пользователь может запросить изображение кота в определённом настроении, но модель может создать для него изображение кота с выражением злобы.
3. Непредсказуемость. Иногда Stable Diffusion может создать изображение, которое кажется пользователю неуместным или оскорбительным. Например, Stable Diffusion может сгенерировать изображение обнажённой женщины или сцены насилия.
Несмотря на эти проблемы, Stable Diffusion остаётся популярной моделью. Его используют художники, дизайнеры и другие люди, которым нужно создавать изображения.
Новое поколение
Stable Diffusion 3 — это обновлённая версия Stable Diffusion с улучшенными возможностями.
Что нового в Stable Diffusion 3:
— Улучшенное восприятие запросов. Stable Diffusion 3 может лучше понимать запросы пользователей и создавать более реалистичные и детализированные изображения.
— Новая лицензия. Stable Diffusion 3 теперь можно использовать для коммерческого использования.
— Оптимизация для домашних компьютеров. Stable Diffusion 3 оптимизирована для использования на домашних компьютерах с процессорами Intel и NVIDIA.
Когда Stable Diffusion 3 выйдет, разработчики планируют выпустить несколько версий модели.
Во-первых, они выпустят Stable Diffusion Encode 1.5, который будет доступен для обучения и использования в исследовательских целях.
Затем, когда Stable Diffusion 3 будет готов к выпуску, они выпустят две версии модели: Stable Diffusion Base 3 и Stable Diffusion Large 3.
Stable Diffusion Base 3 будет доступна для домашнего использования, а Stable Diffusion Large 3 будет использоваться в коммерческих целях.
Обе версии будут доступны как в виде открытого исходного кода, так и в виде двоичных файлов.
Ожидается, что Stable Diffusion 3 значительно улучшит стабильность и производительность модели. Это сделает Stable Diffusion ещё более популярной среди разработчиков и художников.
