В первые годы существования многих технических областей исследовательское сообщество часто использует широкий спектр метрик, которые не поддаются сопоставлению из-за смещения в сторону применения конкретных мер.
Такой переход позволяет более широко обмениваться знаниями, поскольку позволяет сравнивать полученные результаты, сопоставлять их с контрольными образцами и использовать инструментарий для оценки.
Ученые считают, что взаимодействие человека и робота достигло такого уровня и, таким образом, работаем над созданием набора общих метрик. В частности, они начали определять методы оценки того, сколько усилий человек и робот должны приложить (независимо и совместно) для эффективного выполнения поставленной задачи. Их целью является создание основы для построения лучшего HRI и повышения эффективности работы команд роботов-людей.
Основная трудность в определении общих метрик заключается в невероятно широком спектре применений человеческих роботов. Таким образом, хотя метрики из других областей (HRI, человеческий фактор и т.д.) могут применяться для удовлетворения конкретных потребностей, определение метрик, которые могут вместить все прикладное пространство, может оказаться невозможным.
Многие показатели, такие как время выполнения, в значительной степени зависят от конкретного приложения или задачи. Поэтому многие месторождения разрабатывают справочные задачи на основе сценариев.
Лучшим примером такой техники в HRI является городская поисково-спасательная арена НИСТ, которая в настоящее время используется для подсчета очков в ряде соревнований роботов. На арене используются показатели, ориентированные на общую производительность человеческих роботов (например, количество найденных жертв минус количество назначенных наказаний), но не подчеркивающие конкретно, как выполняется миссия (т.е. человеком, роботом или комбинацией этих двух методов).
В качестве средства разделения HRI, метрики могут быть организованы в соответствии с характеристиками системы и взаимодействиями. Хотя было предпринято несколько попыток создания таксономии, сообществу еще предстоит прийти к консенсусу в отношении стандартной основы.
Таким образом, цели усилий исследователей заключаются в следующем:
- Определить классы метрик для облегчения сравнения результатов исследований;
- Определить общие метрики, которые могут быть использованы для оценки по широкому кругу задач и систем;
- Предоставить набор измерительных инструментов для будущих исследований.
СФЕРА И РАМКИ
В частности, ученые представляют метрики по пяти категориям задач. Они выбрали эти задачи, потому что они могут быть выполнены на высоком уровне человеческого направления (чистая телеоперация), на высоком уровне независимости роботов (полная автономия), или в любой момент спектра взаимодействия.
Таким образом, исследователи верят в это:
- Показатели широко применимы к широкому спектру применений;
- Можно оценить влияние различных уровней/типов HRI на производительность.
Навигация
Это фундаментальная задача для мобильных роботов: переместить робота из положения А в положение Б.
Для выполнения этой задачи необходимо определить, где находится робот (А), где он должен находиться (Б), как туда попасть (путь, использование ресурсов и т.д.) и как справиться с факторами окружающей среды и непредвиденными обстоятельствами (препятствия, опасности и т.д.), возникающими на пути.
Восприятие
В центре внимания этой задачи находится восприятие и понимание удаленной среды для таких приложений, как поиск, наблюдение, идентификация целей и т.д.
Эта задача не включает восприятие, необходимое для других задач (например, навигация требует локализации).
Выполнение этой задачи требует:
- определения контекста с помощью проприоцептивного зондирования;
- интерпретации данных датчиков в этом контексте;
- поиска/фильтрации дополнительных данных датчиков;
- принятия решения о том, какую информацию следует предоставлять другим агентам.
Отражая текущую практику, ученые делают акцент на изображениях, полученных с камер, при выборе метрик восприятия.
Руководство
Целью этой задачи является координация и управление действиями людей и роботов, действующих независимо или в группах.
Первостепенное значение имеет выделение и развертывание ресурсов для обеспечения надлежащего охвата (т.е. наличие "правильного" агента в "правильном" месте и в "правильное" время).
Выполнение этой задачи требует:
- оценки наличия;
- понимания возможностей;
- координации работы группы;
- мониторинга;
- выявления проблем и вмешательства.