Найти в Дзене

🎞️ Видео от первого лица — из обычного ролика

! Корейские исследователи из KAIST AI и Seoul National University представили EgoX — фреймворк, который превращает видео от третьего лица в POV-формат (от первого лица). 🔄 Как это работает? • Поднимает исходное видео в 3D-точку облако • Генерирует “примарное” эго-видео по целевой траектории • Использует диффузионную модель (с LoRA) + геометрический self-attention для достройки невидимых частей сцены Модель сохраняет геометрию, добавляет реалистичные детали (руки, окружение) и работает даже на “диких” видео. Код обещают на GitHub скоро! 👀

🎞️ Видео от первого лица — из обычного ролика!

Корейские исследователи из KAIST AI и Seoul National University представили EgoX — фреймворк, который превращает видео от третьего лица в POV-формат (от первого лица).

🔄 Как это работает?

• Поднимает исходное видео в 3D-точку облако

• Генерирует “примарное” эго-видео по целевой траектории

• Использует диффузионную модель (с LoRA) + геометрический self-attention для достройки невидимых частей сцены

Модель сохраняет геометрию, добавляет реалистичные детали (руки, окружение) и работает даже на “диких” видео. Код обещают на GitHub скоро! 👀