SD нарешті може розмістити фотографії! Controlnet новий процесор ip-адаптер

Джерело: AI Moment

Нещодавно, після того, як усі SD було оновлено до версії 1.6, ваш процесор Controlnet має ще кілька препроцесорів. Тоді я познайомлю вас із функціями цих препроцесорів одну за одною. Те, що я хотів би вам сьогодні представити, так це ip-адаптер. Простіше кажучи, це функція заповнення картинок. Ми завантажуємо картинку в controlnet, а потім через цей препроцесор на основі завантаженої картинки буде згенеровано наше зображення, що еквівалентно функції mj.Mat. Тож далі я детально поясню вам цей препроцесор.

Крок 1: Завантажте препроцесор

1. Хоча у вас є цей препроцесор, у вас все ще немає цього файлу, тому вам потрібно завантажити препроцесор.

2. Я завантажив його на Baidu Netdisk тут, ви можете завантажити його самостійно.

Код вилучення: aqzk

aqzk

Код декомпресії: немає

3. Коли всі завантажать його, помістіть його в H:\SD\sd-webui-aki\sd-webui-aki-v4.2\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator \завантаження.

Крок 2: Як використовувати

1. Давайте спочатку створимо випадкову картинку. Наприклад, я створив цю картинку тут.

02. Тут ми відкриваємо Controlnet і завантажуємо це зображення.

04. Наш препроцесор і модель слідкуйте за мною, щоб вибрати.

Існує два типи препроцесорів: один підтримує sd1.5, а інший — sdxl. Через мою конфігурацію я продемонструю лише один sd1.5. Ви можете вивчити xl самостійно.

5. Ви можете змінити контрольну вагу відповідно до ефекту. Тут я вибираю 0,5, а потім ми натискаємо для попереднього перегляду.

06. Повернемося до частини підказки. Вписуємо хлопчика. Для моделі кожному також потрібно вибрати підходящу модель. Тут я вибираю шоколадну чоловічу модель.

07. Натискаємо Generate. (Не забудьте синхронізувати розмір зображення тут)

Як щодо цього? Як це порівнюється з картою паду Mj? Я думаю, що це досить добре. Тож ми можемо трохи збільшити вагу. Тут я підвищую її до 0,7 і знову натискаю «Створити».

Ми бачимо, що стиль стає все більш схожим на оригінальне зображення, але хлопчики гірше розуміють наші підказки, через що створені зображення більше схожі на дівчат.

8. Як ви думаєте про цей ефект? Я дам вам кілька фотографій.

Оригінальний малюнок:

Створити графік:

Можна сказати, що ефект все ще хороший, але є ще багато змін у деяких конкретних деталях.

Крок 3: Основний аналіз

1. Принцип: слово підказки + зображення мережі керування = згенероване зображення.

2. Слово-підказка: Гарний хлопець.

Оригінальний малюнок:

Згенерувати графік.

Гаразд, на сьогодні все. Якщо вам цікаво, спробуйте!