Скорее всего, многие уже знакомы с Suno которая позволяет генерировать музыку и песни.
Suno по-своему прикольная, но сейчас я опробовал в деле модель Riffusion, субъективно она лучше следует промптам, субъективно звучание какое-то более естественное и живое.
При создании кавера на песню можно задать степень изменения в процентах — чтобы нейросеть меняла ваш исходный файл немного или сильно фантазировала.
И что еще классно — это гибкий посекундный контроль фрагментов — для каждого можно задать свой промпт.
Обе нейросети доступны бесплатно и без VPN — я зарегистрировался через Google-аккаунт без проблем и начал творить.
В среду я шел ранним утром на тренировку и мне пришла идея написать песню о хорошем способе сохранять позитивное отношение к жизни, я набросал пару строк в заметках, а вечером после работы начал творить!
Я сделал несколько попыток генерации в разных стилях и примерно через час песня готова.
Но мне этого мало. Слушая зажигательное гитарное соло, захотелось оживить этих музыкантов!
В общем, я перетыкал достаточно большое количество разных вариантов и готов поделиться с вами:
1. Если вы хотите попробовать бесплатно и без vpn - рекомендую начать с MiniMax Hailuo. Там при регистрации выдается большое количество кредитов, а качество роликов очень приличное. Нравится возможность в настройках выбирать, как будет двигаться камера. Скачивание доступно с водяным знаком и без, если оформить подписку.
2. Еще из бесплатных вариантов - Qwen , там внизу есть кнопка «Генерация видео», но подряд получится сгенерировать около двух видео, потом вам предложат подождать (кстати, кто ещё не знает, Qwen Max очень неплохой аналог Deepseek для решения повседневных задач, а главное такой же бесплатный).
3. Также прикольные результаты удается достичь с помощью RunWay, Luma
4. Kling по-умолчанию генерирует китайцев на видео, забавно, но качество тоже хорошее. На сайте не дал использовать бесплатные кредиты, написал, что слишком занят 😁, поэтому пробовал через бота в телеге syntxaibot (норм вариант, оплата РФ картой и можно пробовать разные нейронки)
5. Но мой фаворит все-таки Sora от OpenAI, с помощью нее я создал самую большую часть кадров в этом клипе. Ее я использовал тоже через бота, лень затеваться с vpn, виртуальными симками и оплатой иностранными картами.
Попробовал также отечественные разработки - Шедеврум от Яндекса хоть и генерирует картинки на очень хорошем уровне, но видео - это лютый кринж (можете попробовать сами).
Аналогично Кандинский от Сбера. Благо, за такое хотя бы не берут оплату.
В общем, наши ребята пока играют в догонялки. Надеемся, что догонят в ближайшее время, потому что немного обидно получать на итоговом видео американские флаги на нашивках космонавтов.
Чтобы сделать этот клип - пришлось выполнить больше 30 генераций с различными промптами. Да, достаточно ресурсоемко, но это явно намного быстрее и дешевле, чем снимать контент такого же уровня.
На выходе получались отрывки по 5-10 секунд, которые я нарезал, ускорял, чтобы подогнать под музыку.
Ну и обязательно немного цветокоррекции - без нее кадры после склейки выглядят совсем «разными». А еще нейронки очень любят неестественную насыщенность, которую, впрочем, также легко убирать в программах для монтажа (я использую Premiere Pro).
Создание такого клипа заняло примерно 4 часа, плюс около часа музыка, итого - 5 часов, поэтому пока не знаю, когда у меня дойдут руки до следующего такого видео. Но если будет отклик у аудитории - то почему бы и нет, да и в целом я люблю монтировать.
Итоговое видео загрузил в ВК.
Осторожно, в припеве используется ненормативная лексика (хотел сделать без нее, но получается не такой мощный и оздоравливающий «психологический эффект»).
В общем — смотрим, лайкаем, репостим и оздоравливаемся! А ещё не забывайте писать в комментариях — а нравится ли вам такое совместное творчество с нейросетями?