Разработчик из России создал нейросеть, которая заменяет полноценную студию звукозаписи

Работает за несколько музыкантов

Российская музыкальная нейросеть от компании Robotext.io без проблем может конкурировать с полноценной студией звукозаписи: она генерирует тексты песен, создает оригинальные мелодии и вполне может заменить вокалиста и аранжировщика. Облачный сервис RoboMix появился совсем недавно – 1 октября, но уже создал для пользователей 12 тысяч музыкальных произведений.

Фундамент цифрового решения – собственная нейросеть компании на 3,5 миллиарда параметров, которая является российской разработкой и не зависит от зарубежных цифровых решений и провайдеров. Как отмечает разработчик, RoboMix – это онлайн-сервис, который генерирует песни в самых разных жанрах, в том числе поп, данс-поп, синт-поп и другие всего за несколько секунд.

Нейросеть решает несколько задач одновременно: поможет серьёзно сэкономить время и за одну минуту подготовит уникальную мелодию, аранжировку и вокал, может раскрыть талант пользователя и создаст ему профессиональный трек, несмотря на отсутствие у него профессионального образования или голоса.

ИИ-ассистент станет для начинающего музыканта или меломана источником вдохновения и разовьет музыкальную идею или «поддержит» в создании уникальной песни. Еще одно преимущество нового онлайн-сервиса – его доступность. Воспользоваться произведением российского разработчика может любой человек, сервис работает через обычный браузер и для него не требуется музыкальное оборудование или специальное программное обеспечение.

Роман Федоров - аналитик, эксперт NeuroCore«Нейросеть всегда опирается на датасет (набор данных), стремясь к среднестатистическому идеалу, который основан на том, какие параметры и данные заложил разработчик в обучающий датасет. В то время как человек может сознательно добавить несовершенства, которые делают песню живой».

Проблем с законом не будет

Команда обучила нейросеть с помощью уникального русскоязычного аудио-датасета объемом около 300 гигабайт, что составляет примерно 150 тысяч минут записей. Важно, что все использованные данные – открытые лицензионные произведения, которые размещены в свободном доступе согласно соответствующим лицензиям. Сейчас написать песню с помощью российской музыкальной нейросети получится только на русском и английском языках.

Воспользоваться помощью ИИ можно через стандартный веб-интерфейс браузера или интерфейс API. Пользователь формулирует идею будущей композиции, задает настроение, тематику и продолжительность трека, выбрав голос вокалиста, а система умеет учитывать вкусы автора и предлагать подготовленные шаблоны («пресеты»). «Клиент» может повлиять на создание трека, убрав шум, улучшив его качество или использовать встроенные ИИ-алгоритмы.

Помощь с рифмой – самый востребованный инструмент

Как отмечают представители компании-разработчика, помимо рядовых пользователей, сервисом активно интересуются профессиональные авторы песен и продюсеры. Самый востребованный инструмент – автоматический подбор рифмы, который дополняет генератор готовой песни. Наиболее популярные музыкальные жанры – поп, хип-хоп и рок-музыка. В планах у создателей цифрового продукта повышение качества композиций, внедрение возможностей использования нескольких голосов одновременно и создание инструментов для структуры песен с переходами между частями трека.

Придаст импульс рынку музыкальной индустрии в России

Создание ИИ-ассистента – значимый шаг в будущее для российского рынка музыкальных технологий и креативной индустрии. Он демонстрирует, что нейросеть выходит за рамки софта и расширяет свой функционал, а ее возможностями могут воспользоваться музыканты, подкастеры, блогеры и многие другие.

Разработка Robotext.io – это доступный для каждого инструмент звукозаписи с ИИ-поддержкой. В будущем цифровое решение может выйти на рынок для массового использования музыкантами-любителями и студиями звукозаписи, возможна интеграция с облачными сервисами и мобильными приложениями, коллаборации с другими перспективными проектами. Внедрение подобных цифровых решений российскими разработчиками способствует большей технологической самостоятельности России в области музыкальных и аудио-решений и придаёт новый вектор для роста развлекательной индустрии.

В перспективе разработка российских программистов может стать серьезным конкурентом для глобальных цифровых решений на рынке аудиотехнологий и при необходимой адаптации – успешным продуктом на экспорт для стран СНГ и Глобального Юга.