Найти тему
NeiroBarD

Как я осваиваю нейронные сети для создания клипов и песен

Вот уже третий месяц, как я увлёкся темой нейронных сетей для генерации песен, а затем и клипов к ним.

Почему? Зачем? И как?

Потому что очень привлекательной показалась идея доступной генерации музыки, например, в стиле Powerwolf на свой текст. Да и вообще, сама идея, что теперь можно взять свой стих, клик-клик-клик, и вот уже его кто-то спел, с голосом, с музыкой - просто фантастика же!

Suno - это, как я понимаю, лидер направления, генерирует сразу две готовых песни до 4 минут по запросу, делает очень быстро, некоторые моменты хорошо получаются. Легок в освоении, хотя, вероятно, получить желаемый результат, если вы его себе представляли мысленно, не удастся. Но штука крутая. 50 кредитов в день даёт без подписки, это 5 раз по 2 варианта песни можно сделать. Каждый день обновляется, количество аккаунтов не ограничено. Для поэтов, которые хотели услышать свои стихи - просто бомба!

Udio - сейчас уже продвинулась, есть генерация 2 минуты, но с Русским языком плохо работает. Первая версия 30 секунд получше справляется. Казалось бы, зачем она вообще такая нужна? А она позволяла добиться очень похожего стиля и звучания Powerwolf, Sabaton, Король и Шут и т.п. Ролики с переделками всего, что можно и нельзя, заполнили youtube. С этим борются, теперь добывать нужное звучание сложно. Но всё равно это какой-то другой звук, нежели в suno.

Ну и, конечно же, оказалось, что получившиеся песни девать некуда, знакомые от них уже устали. А youtube голое аудио не хочет брать, к нему нужна хотя бы картинка. Так и началось вовлечение в нейросети для генерации картинок и видео, а потом монтаж этого всего в клипы.

Прогресс можно было бы отследить на youtube канале, но власти борются с россиянами, заставляя использовать отечественные видеохостинги. Поэтому, при желании, можете заглянуть на https://vk.com/neirobard, там продублировал последние. При наличии средств борьбы с ограничениями wellcome https://www.youtube.com/@NeiroBarD