Но в интерактивной среде эта логика ломается: музыка должна адаптироваться к поведению игрока, а не наоборот. Исследователи обучили ML-модель считывать движения дирижёра через motion capture и управлять параметрами музыки в реальном времени. Тело становится контроллером - это не замена MIDI-клавиатуры, а смена парадигмы: управление через переменные, а не через ноты. Как именно строили пайплайн обучения дирижёра и что это значит для процедурного аудио - разбираемся в статье.
Дирижёр годами оттачивает идеальное повторение - каждый жест выверен, чтобы оркестр звучал одинаково. Но в интерактивной среде эта логика ломается: музыка должна адаптироваться к поведению игрока, а не наоборот.
Исследователи обучили ML-модель считывать движения дирижёра через motion capture и управлять параметрами музыки в реальном времени. Тело становится контроллером - это не замена MIDI-клавиатуры, а смена парадигмы: управление через переменные, а не через ноты.
Как именно строили пайплайн обучения дирижёра и что это значит для процедурного аудио - разбираемся в статье.
