Ученые из МИСИС, ВШЭ и лаборатории ИИ «Сбера» Sber AI Lab создали новый метод распознавания лиц и эмоций на видео, сообщили «Известиям» авторы проекта.
«Наш подход основан на последовательном анализе входных видеоданных с различной детализацией (частотой кадров). Этот метод спроектирован так, чтобы быть очень быстрым и применяться к любому способу извлечения характерных признаков лиц на основе глубоких нейросетей без дополнительного обучения всей модели», — сказал заместитель директора центра искусственного интеллекта НИТУ МИСИС Андрей Савченко.
Алгоритм работает так: в первую очередь анализируются два кадра — первый и последний. Если ИИ может сделать правильный вывод, то его работа останавливается. В противном случае добавляется еще несколько кадров в середине, а затем снова проверяется правильность выводов. Например, для простых видео, где выражения лиц хорошо распознаются, решение принимается практически мгновенно, а для более сложных требуется уже обработать намного больше видеокадров.
«Для оптимизации метода важно не просто собирать информацию со всех кадров видео, но и уметь правильно выстраивать последовательность принятия решений, то есть сразу отсеивать ненужную информацию, чтобы оставались только необходимые для классификации данные», — объяснил Андрей Савченко.
Нейросеть распознает не только лица, но и эмоции человека. Она может сравнивать выражение лица в кадре и находить похожее во всем видео.
Программа способна работать на бюджетных смартфонах, планшетах, ноутбуках, камерах и других слабопроизводительных системах. Эксперты считают ПО перспективным, например, оно может применяться в системах видеоаналитики в умных домах и для розыска людей.