Найти в Дзене

Тайна нейровидео или генерь правильно!

А ты знаешь как нейросеть делает видео? Я не знаю как делает, но точно знаю как НЕ делает!

Чтобы использовать нейронки максимально эффективно стоит разобраться с основными принципами их работы.

Видео с меняющимися вселенными или пляшущими статуями создают впечатление, что нейронные сети могут "оживлять" объекты внутри картинки.

-2

Но это не так. Нейронная сеть рисует 2D/3D картинку, а потом "оживляет" камеру.

В случае с 2D - это масштабирование (приближение-удаление). В случае с 3D история сильно сложнее.

Камеру можно двигать по трем осям (ближе-дальше, ниже-выше, лево-право), а еще можно задавать угол поворота.

-3

Как это работает? Возьмите в руки смартфон, включите камеру и подвигайте ее по-разному. Попрыгайте, подбегите к, например, столу и наклонитесь. Не забудьте включить запись видео!

Потом посмотрите результат. Вот так нейронка "рисует" движение. "Бегает" с камерой в сцене, которую вы задали в промте. И единственный, кто движется - камера и только камера.

-4

Помните это, когда решите что-то задефорумить и сгенерить нейровидео! Удачных видосиков!

-5