Найти в Дзене
HTN

Microsoft научила ChatGPT управлять роботами и дронами

Чат-бот с искусственным интеллектом ChatGPT осваивает новые области применения. После работы с интеллектуальными задачами: написание дипломных работ и статей, программирования — компания Microsoft решила начать тестирование бота в качестве системы управления роботами и дронами.

Система работает так: разработчики описывают ChatGPT задачу простыми словами, а он выдает программный код для ее решения с помощью робота или дрона. Иногда чат-бот задавал уточняющие вопросы, после чего дорабатывал код.

«Ну разве не здорово сказать роботизированному помощнику: «Пожалуйста, подогрей мне обед», а он бы сам нашел микроволновку? Несмотря на то, что речь – это наиболее интуитивная форма для выявления наших намерений, мы полагаемся на написанный от руки код для управления работами. Мы попытаемся изменить это с помощью ChatGPT», — считают в Microsoft.

Компания опубликовала видео, в которых чат-бот генерирует код для управления различными устройствами. В одном из них ChatGPT задает траекторию полета для дрона.

Microsoft протестировал возможности ChatGPT в смоделированном сценарии промышленной инспекции ветрогенераторов. Использовался симулятор Microsoft AirSim. Система смогла «изучить» с помощью дрона все лопасти ветряка и другие элементы.

Microsoft опубликовала ролик, демонстрирующий второй эксперимент с ChatGPT. Чат-бот управляет роботизированной рукой для того, чтобы собрать разрозненные блоки в логотипа компании. В итоге ИИ смогла собрать из блоков логотип Microsoft.

«Мы использовали диалоговую обратную связь, чтобы научить модель компоновать изначально предоставленные API в более сложные высокоуровневые функции, которые ChatGPT закодировал сам«, — уточняют разработчики.

При этом они удивились, что ChatGPT смог «вспомнить» логотип Microsoft из своей внутренней базы знаний, затем нарисовать логотип в виде кода SVG, а затем применить навыки программирования для того, чтобы составить его физическую форму.