Сверхбольшая чашка Stable Diffusion идет бесплатно! "Самая сильная открытая модель графа Винсента", подсказки и попроще

Источник: Кубит

Самая мощная версия Stable Diffusion уже здесь!

Только что официально выпущен SDXL 1.0, и вы можете бесплатно попробовать его в Интернете.

С точки зрения эффекта, является ли это блокбастером из реальной жизни:

Сюрреалистичная панда пьет пиво:

Или комиксы о киберпанке, оба очень хороши~

По данным Stability AI, SDXL 1.0 воспроизводит более яркие и точные цвета, с улучшенной контрастностью, светом и тенями, а также может создавать 1-мегапиксельные изображения (1024×1024).

Он также поддерживает постредактирование сгенерированных изображений непосредственно на веб-странице.

(Пахнет дракой с Midjourney и Firefly)

Нетизены не могут не попробовать~

По сравнению с базовой Stable Diffusion, SDXL 1.0 дает более точные и реалистичные результаты.

И чиновник сказал, что подсказки могут быть проще, чем раньше.

Это связано с тем, что базовые параметры модели SDXL 1.0 достигли 3,5 миллиарда, а способность к пониманию выше.

По сравнению с базовой версией Stable Diffusion количество параметров составляет всего около 1 миллиарда.

В результате SDXL 1.0 также стала одной из текущих крупнейших моделей открытых изображений. Чиновник даже прямо сказал, что это лучшая модель с открытым изображением в мире.

Нечего сказать, давайте начнем~

Принт Musk на бело-голубом фарфоре

SDXL 1.0 очень удобен в работе, можно напрямую вводить, а также снизу проверять параметры стиля и размера.

По умолчанию за раз создается 4 изображения.Если вы не удовлетворены, вы можете нажать «плюс» ниже, чтобы продолжить рисование.

Согласно официальному представлению, теперь, когда SDXL 1.0 может генерировать шедевры, нет необходимости добавлять слово «шедевр».

Пусть он генерирует изображение в японском стиле, стиль рисования очень подходит, а обработка света и тени более естественная.

Скриншот из аниме 1990-х годов с низким разрешением: пара, уходящая ночью по улице

Или пейзажное фото? Это также может быть ложным.

Пусть даже Маск стоит в китайском дворике, глядя в небо...

Илон Маск в старинном китайском дворце

Или ты купил Apple?

На «WWDC» он поднял новый iPhone, чтобы показать людям в окружении репортеров и фанатов (дож).

Илон Маск представляет новый iPhone на WWDC

В дополнение к луковым новостям об этих старых лошадях, также хорош эффект живописи.

Тот, что слева, - это стиль чернил Ци Байши, а тот, что справа, - карикатура.

左：Илон Маск произносит речь, рисует тушью, стиль Ци Байши Справа: комикс Илона Маска

В дополнение к покраске, вы также можете поместить старых лошадей в наш Юань Цинхуа.

Илон мускус в форме фарфора Yuan Dynasty Blue and White

«Старые истории о лошадях», показанные выше, относительно просты в использовании.

Но от эффекта промежность не растягивается из-за простых подсказок, что подтверждается и официальным заявлением.

Но мы все же хотим посмотреть, как бы это выглядело, если бы мы использовали более сложный и изысканный?

Мы нашли редкую фотографию старой лошади, работающей авторемонтником в Советском Союзе, созданную Midjourney, и повторно скормили ее MJ, чтобы сделать новую.

MJ сгенерировал следующее, которое мы использовали для тестирования SDXL:

Илон Маск (这里MJ生成的是a мужчина) стоит в мастерской, в стиле эстетики промышленного оборудования, Deutscher Werkbund, равномерно постановочные изображения, советские, светло-индиго и темная бронза, новая американская цветная фотография, детализированные черты лица

Стиль именно такой, как мы ожидали, и детали неплохие.

В качестве финала есть еще одна сложная картинка, которая также генерируется MJ на основе предыдущих работ и затем передается в SDXL.

Илон Маск ест еду палочками, в стиле Питера Коулсона, кросс-процессинг/обработка, пинхол-фотография, травяной тримп, джеймс тиссо, трансавангардия, точечный замер

Слева работа SDXL, а справа оригинальная версия MJ, можете сравнить.

Слова-подсказки также поддерживают китайский язык, но похоже, что результаты будут склонны к национальному стилю, и точность тоже может пострадать.

Например, после ввода «тигр на берегу моря» случайно выдается девушка в национальном стиле.

Все видели эффект, так как быстро SDXL создает изображения?

Для бесплатных пользователей время в основном тратится на ожидание в очереди, но оно не будет ждать слишком долго.

За 5,5 секунды очередь сократилась со 160 до 99.

В дополнение к созданию изображений SDXL также предоставляет множество функций постредактирования.

В частности, сюда входит удаление фона, обработка деталей, увеличение кадра и т. д.

Эти функции уже доступны на платформе Clipdrop, где находится SDXL, и SDXL может передавать сгенерированные картинки в соответствующий модуль одним щелчком мыши.

Здесь мы выбираем функцию удаления фона, чтобы показать его.Видно, что в деталях краев огрехов почти нет.

В настоящее время квота бесплатного использования SDXL все еще относительно высока.После входа в систему каждая учетная запись может генерировать 400 карт в день (необходимо стоять в очереди).

Ежемесячный платеж составляет 9 долларов США в месяц, а годовой платеж эквивалентен 7 долларам США (около 50 юаней) в месяц, включая 1500 квот SDXL в день, и нет необходимости стоять в очереди.

Однако цены в разных регионах кажутся разными, например, годовой платеж в Аргентине составляет 742 песо (около 19,4 юаня или 2,7 доллара США) в месяц.

Кроме того, поскольку платная версия на самом деле представляет собой подписку Pro на платформу Clipdrop, в нее включены и другие функции платформы.

Помимо учетных записей Pro, для разработчиков доступны версии API (с доступом к Stability AI, Amazon и т. д.).

** «Максимальный кубок» в модели Open Image**

В последнем блоге Stability AI представляет дополнительные технические подробности SDXL 1.0.

Во-первых, модель открывает новые горизонты как в масштабе, так и в архитектуре.

Он новаторски использует базовую модель + модель уточнения.

Размер этих двух параметров составляет 3,5 миллиарда и 6,6 миллиарда соответственно.

Это также делает SDXL 1.0 одной из крупнейших открытых графических моделей, доступных сегодня.

Эмад Мостак, основатель Stability AI, сказал, что большее количество параметров может позволить модели понять больше концепций и научить ее более глубоким вещам.

В то же время усовершенствование RLHF также было выполнено в версии SDXL 0.9.

Вот почему SDXL 1.0 теперь поддерживает короткие подсказки и может различать Красную площадь и Красную площадь.

В конкретном процессе синтеза на первом этапе базовая модель генерирует скрытый шум, а затем уточненная модель выполняет шумоподавление.

Базовую модель также можно использовать как самостоятельный модуль.

Комбинация этих двух моделей может генерировать изображения более высокого качества, не потребляя больше вычислительных ресурсов.

Согласно официальному представлению, SDXL 1.0 может работать на графическом процессоре потребительского уровня с 8 ГБ видеопамяти или в облаке.

Кроме того, SDXL 1.0 также был улучшен в плане тонкой настройки и может генерировать пользовательские LoRA или контрольные точки.

Команда Stability AI также сейчас создает новое поколение структурированных, стилизованных и комбинированных элементов управления для конкретных задач с помощью T2I/ControlNet специально для SDXL.

Однако эти функции пока находятся в стадии бета-тестирования, и в будущем вы сможете обратить внимание на официальные обновления.

Таким образом, диаграммы Винсента — это постепенный итеративный процесс, и цель SDXL 1.0 — упростить этот процесс.

Мостак сказал, что сейчас нужно всего 5-10 снимков, чтобы быстро настроить модель.

Из отзывов пользователей также видно, что SDXL 1.0 более удовлетворителен, чем Stable Diffusion.

Фактически, с апреля этого года Stability AI выпустила самую раннюю бета-версию SDXL.

Внутреннее тестирование началось в июне, и некоторое время назад была выпущена версия 0.9. Тогда было объявлено, что в июле будет выпущена открытая версия, последняя версия 1.0. В настоящее время соответствующие веса кода опубликованы на GitHub.

А человек, отвечающий за машинное обучение Stability AI, сказал, что по сравнению с SDXL 0.9 версия 1.0 снижает потребность в вычислительной мощности.

Если вас интересует детская обувь, попробуйте ее~

Пробный вход:

Гитхаб:

Справочная ссылка: [1] [2] [3]