Найти в Дзене
Senerin & Viv

Нейросеть Stable Diffusion: ControlNet + IP-Adapter. Плагиат или же нет? Красивые портреты без усилий.

Приветствую!

Во-первых, коротко о Contrоlnet. Это дополнительное расширение, для которого доступны очередные модели с различными назначениями. Для меня - это еще один способ упростить работу с SD.

Во-вторых, IP-Adapter - как раз таки дополнение к Contrоlnet. Оно позволяет создавать новое изображение на основе другого.

Допустим, у вас есть промт:

1 девушка, соло, верхняя часть тела, смотрит на зрителя, белый фон, стрижка боб, короткие волосы, разноцветные волосы, макияж, приоткрытые губы, красные губы, подводка для глаз

в результате которого вы получаете примерно такое изображение:

-2

!Внимание!

Предупреждаю сразу: у меня вообще не выключается Hires. fix и ADetailer. Без них тоже получаются неплохие изображения, но ясное дело не такие уж и хорошие. Качество сразу падает.

Теперь же включаем IP-Adapter, и добавляем в него другое изображение.

-3

На выходе будет этакая семь между вашим промтом (можно и без него вообще) и другим изображением.

вес 1
вес 1

Чем выше вес, тем сильнее выходное изображение будет похоже на исходник, тем выше шанс получить артефакты. И наоборот.

вес 0.5
вес 0.5

Лично я придерживаюсь веса в 0.5-0.35.

вес 0.35
вес 0.35

Конечно же вариантов использования здесь много, особенно если это касается создания нового изображения с нужным вам лицом, но сейчас не об этом, да и с лицами еще разобраться надо (там используется другая модель).

Короче, можно вообще использовать изображение - как промт. Ничего не прописываете в запросе, а просто вставляете понравившееся изображение в IP-Adapter.

Особенно мне нравится, когда есть большая разница в стилистике.

К примеру:

-7

Данное изображение было создано мною в нейросети Kandinsky.

А так оно стало выглядеть после того, как прошло через IP-Adapter и модель cg25D_v10:

Согласитесь, что они все еще похожи, однако же процент этой схожести крайне низок, как будто два разных художника решили нарисовать что-то на одну тему. Ясное дело, что все это попахивает плагиатом. Именно поэтому я и рекомендую таки использовать хоть какой-нибудь промт ради добавления своих деталей к исходнику и вес самого исходника не ставить выше 0.5. Вы можете возразить, что так-то никто и не узнает, какой был использован оригинал, а не пойман - не вор... В принципе, так и есть, но лично мне совесть не позволяет поступать таким образом (да и зачем плодить разные версии одного и того же, когда можно состряпать что-то иное?), хотя использование IP-Adapterа таким макаром - все же сложно не обозвать плагиатом =_=".

В любом случае, у меня на компе накопилось уже достаточно изображений, созданных через такой вот процесс, а потому и родилась данная статья.

1 женщина, очень длинные волнистые волосы, ((Gloomcore)), тёмная волшебная атмосфера, <lora:Dreamwave v2L:0.2>

Запрос в промте стоял такой. То, что добавила в IP-Adapter показывать не стану - брала чужое.

-10
1 женщина, (прямые волосы:1.3), ((Gloomcore)), темная волшебная атмосфера, светящаяся, <lora:GoodHands-vanilla:1>, <lora:AnzhcDreamwave v3_1 исправление водяного знака:0.8>

А вот здесь поучаствовал персонаж из аниме.

1 женщина, (фиолетовые волосы:1.3), ((Gloomcore)), волшебная атмосфера, сияющая, <lora:GoodHands-vanilla:1>, <lora:Dreamwave v2.5_8200:0.5>

В исходнике была девушка с крыльями и мечом.

Здесь я составила промт на выбор.

1 женщина, ({масляное|титан|рубин|серебро|разноцветный|Белый|красный|зеленый|желтый|фиолетовый|персиковый|бежевый|оранжевый|мандариновый|золотистый|охра|кремовый|коричневый|коричневый|янтарный|шартрез|бирюзовый| серые|морская пена|лазурь|морской} волосы:1.3), ((Gloomcore)), волшебная атмосфера, сияние, <lora:GoodHands-vanilla:1>, <lora:Dreamwave v2.5_8200:0.5>
Одна девушка, светящиеся волосы, украшения, серьги, тиара, драгоценный камень, светящиеся глаза, светлая тема, кристалл (пастельный стиль: 1.3), закрытый рот, легкая улыбка, <lora:Dreamwave v3:0.5>
-14

Тот же промт, другой исходник.

-15

Как видите, модель одна и та же, а потому девочка словно бы та же самая, просто в разных одеждах. Здесь было бы хорошо прописывать что-то перед словом "девушка".

-16

Но изображения получаются очень красивые! Попробуй еще составь адекватный промт для того, чтобы сбацать подобное без исходника.

-17

Цвет и окружение - берется как раз таки у оригинала. Вес выше 0.5 я здесь не поднимала.

А вот здесь чуть повыше поставила, и качество снизилось. Особенно у второй, там еще выше. Исходник у них один.

-19

Так что я вернулась к весу 0.5

-20

Промт не меняется, зато меняется изображение. Разве не здорово?

Исходник хорошо влияет и на позу.

-22

И на прически - в оригинале тоже коса.

-23
Одна девушка, светящаяся, украшения, серьги, светлая тема, хрусталь, (стиль пастель:1.1), <lora:Dreamwave v3:0.5>

А вот здесь я экспериментировала с весом лоры, последняя - без нее вообще.

-25

Данная лора добавляет как минимум завитухи, кручённость такую - волосы прямо вздымаются. А еще делает более круглое, кукольное лицо.

-26

И как-то вокруг наводит больше суеты. Начинает летать всякое. Так что можно и без нее, конечно.

-27

Тогда волосы более плавные, лицо становится как бы взрослее... Но тут от модели все зависит.

-28

И от самого исходника.

-29

А на этом все.

Люблю вас 😘

Пока пока 🤗