«Наш подход использует глубокие нейронные сети — тип искусственного интеллекта — для распознавания двигательных элементов, которые впоследствии используются в качестве промежуточных функций для распознавания эмоций».Android-robot.com
Каждый видеоклип был аннотирован с использованием анализа движения Лабана (LMA) — метода и языка для описания, визуализации, интерпретации и документирования движений человека .Android-robot.com
Затем Ву разработал двухветвевую сеть анализа движений с двумя задачами , способную использовать размеченный набор данных для прогнозирования как телесно выраженных эмоций, так и меток LMA для новых изображений или видео.Android-robot.com
«Обширные эксперименты с использованием реальных видеоданных показали, что наш подход значительно превзошел базовые показатели, которые учитывали только элементарные движения тела, что дает надежду на дальнейшее развитие в будущем».Android-robot.com