Самостоятельное обучение игре на пианино редко бывает простым. Большинство приложений проверяют правильность нот, но не объясняют, почему не получается нужное звучание или почему руки быстро устают. Компания Roli разработала музыкальный чат-бот, чтобы решить эту проблему.
Приложение AI Music Coach представляет собой комплексную систему, которая в реальном времени следит за руками музыканта, слушает его игру и в режиме реального времени даёт рекомендации.
В основе системы используется инфракрасная камера, отслеживающая обе руки и все 27 суставов каждой из них со скоростью 90 кадров в секунду. ИИ анализирует не только нажатые клавиши, но и положение пальцев, движения и осанку, параллельно выявляя ошибки техники.
Дополняет всё интерфейс с визуальными подсказками на подключённом устройстве. С ИИ можно разговаривать, задавать вопросы и получать советы прямо во время занятий. Уроки динамически меняют сложность и темп, не привязываясь к конкретным программам.
В ближайшие месяцы выйдет бета-версия приложения AI Music Coach. Оно будет совместимо с умным пианино Roli, цены на которое стартуют от 599 долларов.