Найти в Дзене
80 подписчиков

ZeST: метод для смены материала на объекте по реф картинке. Может работать с несколькими вещами в кадре и вносить изменения с учётом освещения.


Сначала используются адаптеры для извлечения представления о материале из изображения. Затем оно с помощью инпейтинга переносится на целевой объект, используя карты глубины для геометрии и оттенки серого для освещенности. Метод схож с B-LoRA и InstantStyle.

Под капотом IP-Adapter и SDXL.

Демо (Replicate)
Демо (colab)
ZeST: метод для смены материала на объекте по реф картинке. Может работать с несколькими вещами в кадре и вносить изменения с учётом освещения.
02:13
Около минуты