Сегодня в собственную копилку странностей я хочу положить нейросеть, которая преобразует картинку в музыку. Если на сайт загрузить изображение, одна нейросеть CLIP Interrogator преобразует картинку в текст, вторая нейросеть Mubert преобразует текст в музыку.
В итоге получается очень интересное. Я не знаком с нотной грамотой, но могу с уверенностью сказать, получается очень приятное звучание.
Если загрузить изображение парусника под луной, нейросеть сделает нечто с налетом авантюризма и шелестом волн, серый осенний пейзаж звучит меланхолично и ненавязчиво, а радуга дает ритм. Попробуйте, мелодию длинной в 50 секунд можно сразу скачать.
Забавно узнавать как, по мнению машины, звучит тот или иной человек или вещь. На мой взгляд, такой сервис способен очень разнообразить работы визуализаторов, тех кто рисует и демонстрирует свое творчество и (или) процесс создания.
Ребяткам, которые такое придумали и сделали - пять баллов. Я к своему стыду так и не понял, можно ли вставить в статью видео