Итак, на первоначальном этапе обучения ИИ ученые «прорабатывали» все из 36 клавиш (в том числе и цифры) на MacBook Pro 25 раз подряд, применяя к нажатиям разную механическую силу.
Сопутствующие звуки записывались на смартфон и во время вызова в Zoom. Таким образом были получены осциллограммы и спектрограммы, которые и позволили выявить уникальные отличия после нажатия той или иной клавиши.
Лирическое отступление: *Твое лицо, когда ты думал, что все клавиши отжимаются с одинаковым звуком…
Полученные данные были переданы системе машинного обучения – так со временем ей удалось распознать все идентифицирующие акустические особенности сигналов каждой клавиши.
Такие новости мы постоянно публикуем в Telegram. Подписывайтесь на канал, чтобы ничего не пропустить ;)
Следом искусственный интеллект продемонстрировал устойчивые позитивные результаты: точность анализа записи звуков со смартфона (гаджет при записи нажатий находился на небольшом расстоянии от ПК) достигает 95%, распознавания данных от звонка в Zoom – 93%. Тестирование идентичной практики с использованием Skype продемонстрировало результат в 91,7%.
Зачем вообще проводилось исследование? Авторы утверждают, что тест наглядно показал, какая угроза конфиденциальности и безопасности данных кроется за способностями обучаемого алгоритма. Как минимум, метод можно использовать для кражи личных паролей.