Компания Samplab выпустила программу для TextToSample, способную генерировать короткие музыкальные отрывки по текстовому описанию без подключения к интернету. Она основана на генеративной модели, существует в виде отдельной программы и плагина для DAW. Разработчики показали и рассказали, как она работает.
TextToSample работает на базе модели MusicGen. Программа предлагает только поле ввода и вывода: в первое надо ввести короткое описание будущего отрывка, а во втором появится результат. Например, ввести «Trap beat» или «Raggy rave». После обработки программа выдаст аудиофайл длительностью несколько секунд, соответствующий введённому запросу. Вдобавок можно создать звук на основе другого аудиофайла — для этого достаточно перетащить его в поле ввода.
Разработчики напоминают, что инструмент создан не для замены битмейкеров или музыкантов — его можно использовать для вдохновения или поиска идей. Однако он, как и большинство нейросетей, допускает неточности. К примеру, если попросить не добавлять ударную партию, алгоритм всё равно может её добавить. Генератор звуков работает офлайн, но при первом запуске требует интернет-соединения для загрузки модели. Вдобавок ПО требует много системных ресурсов, поэтому генерация занимает некоторое время.