Стабильный каскад: новая модель генерации изображений от Stability AI

Такие читатели, как вы, помогают поддерживать Cloudbooklet. Когда вы совершаете покупку по ссылкам на нашем сайте, мы можем получать партнерскую комиссию.

Вы когда-нибудь задумывались, как искусственный интеллект может создавать реалистичные и оригинальные изображения из текстовых описаний? Если да, то вас может заинтересовать новая модель генерации изображений Stability AI, ведущей исследовательской лаборатории, специализирующейся на генеративном искусственном интеллекте и человеческой инфраструктуре.

Эта модель предлагает ряд преимуществ по сравнению с предыдущими моделями, таких как более высокое качество, более высокая скорость, более низкая стоимость и более простая настройка. Мы объясним, как работает Stable Cascade, на что он способен и как вы можете опробовать его самостоятельно. Подробнее об этом вы можете узнать из этой статьи.

Что такое стабильный каскад?

Stable Cascade — новая функция в Стабильность ИИ, исследовательская лаборатория, специализирующаяся на генеративном искусственном интеллекте и человеческой инфраструктуре. Это модель преобразования текста в изображение, которая может генерировать реалистичные и оригинальные изображения из текстовых описаний. Он сжимает изображения в три этапа до крошечного пространства, что делает их лучше и адаптируемее.

Он достигает замечательных результатов при использовании сильно сжатого скрытого пространства. Stable Cascade доступен на GitHub для исследователей, но не для коммерческого использования. Он выпускается под некоммерческой лицензией, которая разрешает только некоммерческое использование.

Особенности стабильного каскада

Стабильный Каскад

• Преобразование текста в изображение: Создавайте изображения из текстовых описаний, например «дракон».
• Изображение к изображению: преобразование изображений из одного стиля или области в другой, например из эскиза в фотографию.
• живопись: Inpainting можно использовать в творческих целях, например для создания новых дизайнов, или в практических целях, например, для восстановления поврежденных фотографий.
• Перекраска: Заполните или расширьте части изображения, например дыру или фон.
• Канни Эдж: Создавайте изображения из карт краев, например, автомобиль по его контуру.
• 2x супер разрешение: Повысьте качество изображений с низким разрешением, например птиц или документов.

Модели стабильного каскада

Чтобы использовать Stable Cascade, вам необходимо иметь следующие компоненты:

• Этап A: предварительно обученная диффузионная модель, которая может генерировать изображения размером 1024×1024 из скрытых изображений 24×24.
• Этап B: предварительно обученная модель, которая может кодировать изображения размером 1024×1024 в скрытые изображения размером 24×24 и декодировать их обратно в изображения.
• Этап C: модель преобразования текста в скрытые данные, которая может генерировать скрытые данные 24×24 из текстовых подсказок.

Вы можете загрузить предварительно обученные модели для этапов A и B со страницы Stability GitHub. На этапе C вы можете использовать предоставленные модели параметров 1B или 3.6B или обучить собственную модель, используя сценарии и конфигурации из того же репозитория.

Сравнение

• Stable Cascade основан на архитектуре Würstchen, которая сочетает в себе конкурентоспособную производительность с беспрецедентной экономической эффективностью для крупномасштабных моделей диффузии текста в изображение.
• Он может генерировать изображения с в 16 раз меньшими затратами, чем модель Stable Diffusion аналогичного размера, благодаря своей модульной конструкции, которая отделяет генерацию условий текста от декодирования с пространством пикселей высокого разрешения.
• Stable Cascade также может генерировать изображения в два раза быстрее, чем стандартная базовая модель Stable Diffusion XL. Однако это не сравнится со скоростью SDXL Turbo.
• Он может создавать вариации изображений путем извлечения вложений и добавления шума к существующим изображениям, а также точно настраивать модель с помощью методов ControlNet и LoRA.
• Stable Cascade выпускается под некоммерческой лицензией, которая разрешает только некоммерческое использование, а Stable Diffusion имеет открытый исходный код и может использоваться для любых целей.
• В настоящее время он находится на стадии исследовательской предварительной версии и еще не доступен для публичного использования, а Stable Diffusion можно загрузить и запустить в автономном режиме на потребительском оборудовании.

Часто задаваемые вопросы

Как работает стабильный каскад?

Stable Cascade использует трехэтапный подход для создания изображений. Во-первых, он преобразует вводимый текст в небольшое изображение размером 24×24. Затем он увеличивает изображение до более высокого разрешения. Наконец, он добавляет детали и цвета к изображению.

Как я могу использовать стабильный каскад?

В настоящее время он находится в предварительной версии исследования и еще не доступен для публичного использования. Однако вы можете загрузить и запустить Stable Diffusion, который имеет открытый исходный код и может использоваться для любых целей.

Кто разработал стабильный каскад?

Stable Cascade был разработан Stability AI, компанией, которая также создала Stable Diffusion, еще одну модель генератора изображений AI.

Заключение

Stable Cascade — это прорыв в создании изображений с помощью искусственного интеллекта, поскольку он представляет новую трехэтапную архитектуру, которая позволяет создавать реалистичные и разнообразные изображения из текстовых подсказок. Он также предлагает серьезные преимущества с точки зрения эффективности, гибкости и настройки, поскольку его можно обучить и настроить на потребительском оборудовании с минимальными затратами и временем.

Stable Cascade устанавливает новый стандарт для моделей диффузии текста в изображение и открывает новые возможности для творческих и практических приложений. Stability AI предлагает пользователям поэкспериментировать с ним и поделиться своими отзывами и предложениями. Они также планируют выпустить больше обновлений и расширений для модели в будущем.