76 подписчиков
ElevenLabs: выкатили API для генерации звуковых эффектов.
Чтобы продемонстрировать, что с этим можно сделать они собрали и выложили в опенсорс приложение для генерации звуков к загруженному видео.
Как оно работает:
* Берутся 4 кадра видео с интервалом в 1 секунду
* Описание отправляется на API ElevenLabs, чтобы сгенерировать звук
* На стороне пользователя видео и звук сшиваются
PS: в собранном ими приложении нет места под промт из второго шага. Просто грузишь видео и дальше оно само.
Около минуты
18 июня 2024