Используя любое доступное программное обеспечение типа Daz 3D (инструкция по установке: https://daz3d.ru/kak-skachat-i-nastroit-daz-studio-poshagovaya-instrukciya) или Magic Poser (использовать здесь: https://webapp.magicposer.com/ или на iOS) сделайте позы:
Скачайте дополнение для Automatic1111: https://github.com/Mikubill/sd-webui-controlnet
Загрузите подходящую позу, выберите в качестве препроцессора openpose и загруженную модель - например controld_sd15_openpose
Примеры
Параметры для Stable Diffusion
Для генерации "Испанской принцессы на троне" и "На железнодорожной станции" были использованы следующие параметры
Испанская принцесса
Prompt: masterpiece, realistic photography of a spanish princess on a throne, Versailles, renaissance, looking at camera, large hips, pale skin, (long dark hair), natural light, intense, perfect face, cinematic, still from games of thrones, epic, volumetric light, five fingers
Negative Prompt: (deformed iris, deformed pupils, semi-realistic, cgi, 3d, render, sketch, cartoon, drawing, anime:1.4), text, close up, cropped, out of frame, worst quality, low quality, jpeg artifacts, ugly, duplicate, morbid, mutilated, extra fingers, mutated hands, poorly drawn hands, poorly drawn face, mutation, deformed, blurry, dehydrated, bad anatomy, bad proportions, extra limbs, cloned face, disfigured, gross proportions, malformed limbs, missing arms, missing legs, extra arms, extra legs, fused fingers, too many fingers, long neck, nude
Железнодорожная станция
Prompt: girl leaning to a window, (pale skin:0.4), steampunk, scientist, train station, (detailed skin:1.4), realistic, film grain, posing, wind,
Negative prompt: (deformed iris, deformed pupils, semi-realistic, cgi, 3d, render, sketch, cartoon, drawing, anime:1.4), text, close up, cropped, out of frame, worst quality, low quality, jpeg artifacts, ugly, duplicate, morbid, mutilated, extra fingers, mutated hands, poorly drawn hands, poorly drawn face, mutation, deformed, blurry, dehydrated, bad anatomy, bad proportions, extra limbs, cloned face, disfigured, gross proportions, malformed limbs, missing arms, missing legs, extra arms, extra legs, fused fingers, too many fingers, long neck, nude
Модель: Realistic Vision
Рабочий процесс
Использовано приложение MagicPoser на IOS (пробная версии Pro), настроенная поза экспортирована в PNG.
Поза обрезана и сделана квадратным.
Веса для ControlNet от 0,85 до 1. Размер изображения был задан как 768x768. Для улучшения качества изображения использован инпейнтинг - правка лиц, рук.
При помощи ESRGAN_4x масштабировть до 2048x2048. Затем несколько небольших цветовых коррекций в Lightroom.
Другие примеры использования Controlnet
Визуализация скетча
Модель: Dreamlike Photoreal 2.0 | Stable Diffusion Checkpoint | Civitai
Экспериментальная генерация персонажа
Немного юмора
