201 подписчик

ИИ уже "пишет музыку". А точно это музыка?.. 🎶 🎶 🎶

3 минуты

7 прочтений

4 августа 2021

И грозит ли нам массовое "творчество машин"?

Вместе с Hacks-AI (Хакатоны и Лекции по ИИ) и их Телеграм-каналом – продолжаем изучать возможности Искусственного Интеллекта в креативных отраслях.

Сегодня обсуждаем МУЗЫКУ

🎶 🎶 🎶

А при чем тут ИИ вообще?..

Творчество, создание чего-то принципиально нового – это (пока) прерогатива человека.

Но с когнитивными задачами в музыкальной индустрии, а особенно подражанием, искусственный интеллект справляется вполне успешно.

Например, нейронная сеть MuseNet, которая была создана компанией Open AI в 2019 году:

Она создает 4-минутные музыкальные композиции, используя 10 инструментов и комбинируя стили классических и современных композиторов.
Обучаясь, сеть усваивает закономерности гармонии, ритма и стиля, которые затем использует в создании произведений.
Кстати, в 2021 г. сеть даже была принята в Союз композиторов России.

( подробнее )

Творчество машин: уже не фантастика

🔥

Другой интересный кейс – увертюра, написанная нейросетью в стилистике русского композитора А.Н. Скрябина.

Иван Ямщиков, исследователь Яндекса и один из разработчиков, рассказывает, что отправной точкой для создания стала другая нейросеть. Она умела писать стихи в стилистике определенного поэта, обучаясь по модели «language model» (учится предсказывать следующее слово или следующую ноту во фразе). Новая нейронка-композитор обучалась на архитектуре «autoencoder» (трек сжимается до вектора более низкой размерности, а нейросеть пытается развернуть этот вектор и восстановить трек целиком). Этот способ позволяет передать нейросети большой массив данных для обучения, было использовано около 150 тыс. треков.

Созданием музыки процесс не ограничился. Результаты творчества нейросети вылились в целое выступление камерного оркестра на конференции YaC в 2017 году. Главная партия терменвокса была расписана по цветовой шкале Скрябина, то есть каждая нота подсвечивалась определенным цветом, который был закреплен за ней Скрябиным, основоположником светомузыки. Дизайнер Яндекса Кирилл Хачатуров предложил сопровождать выступление генеративной графикой, которая также была создана нейросетью.

( подробнее )

🔥

А вот робот Шимон, созданный учеными Технологического института Джорджии, не только пишет музыку, но и исполняет ее в четыре руки.

Он работает на основе 5 тыс музыкальных композиций и более 2 млн мотивов, загруженных в память, применяя алгоритмы deep learning. Студент Мейсон Бретан помогает Шимону развиваться. Сначала робот «слушал» чужую музыку и импровизировал над заданными последовательностями аккордов, но постепенно перешел к самостоятельному генерированию мелодии и гармонических структур. Его «Мышление» становится все больше похожим на мышление профессиональных музыкантов: он меньше сосредотачивается на каждой отдельной ноте, смещая фокус на общую структуру композиции. Произведения Шимона звучат как микс джаза и классики.

( подробнее )

Не только творчество, но и маркетинг

Итак, мы видим: это уже происходит.

Однако, результатом внедрения ИИ в музыкальную индустрию становится не только ТВОРЧЕСТВО МАШИН.

Но изучение и удовлетворение НУЖД самих ПОТРЕБИТЕЛЕЙ КОНТЕНТА, а также ИССЛЕДОВАНИЯ РЫНКА.

ГЕНЕРАТИВНАЯ МУЗЫКА –

Еще одно новое и весьма перспективное направление

(не путать с "дегенеративной музыкой") :)

Здесь, пожалуй, самый интересный проект – MUBERT.

Я его фанат, кстати. Выдает нонстопом нереально крутые композиции для заполнения звуковым фоном повседневной рутины.

В приложение загружена большая база сэмплов, а алгоритм генерирует из нее непрерывный музыкальный поток.

При этом пользователи могут редактировать стрим, меняя темп, жанр, настроение и т.д. Отлично подойдет для РАБОТЫ, УЧЕБЫ или МЕДИТАЦИЙ.

У них несколько видов продуктов:

PLAY – для прослушивания.
PRO – бесплатный инструмент для музыкантов, с помощью которого можно использовать алгоритм и создавать свои композиции.
BUSINESS – лицензия на использование генеративной музыки, отличное решение, чтобы обойти запрет по авторским правам.
APPS – для ваших собственных приложений.

Больше интересных кейсов – в картинках 👆