Что такое агенты для использования компьютера? От веб до ОС — техническое объяснение Агенты для использования компьютера (также известные как агенты GUI) — это модели на основе визуального языка, которые наблюдают за экраном, определяют элементы пользовательского интерфейса (UI) и выполняют ограниченные действия UI (нажатие, ввод текста, прокрутка, комбинации клавиш) для выполнения задач в неизменных приложениях и браузерах. Примеры публичных реализаций: * использование компьютера от Anthropic; * использование компьютера Gemini 2.5 от Google; * агент, использующий компьютер от OpenAI, который поддерживает Operator...

Salesforce AI Research представляет WALT (Web Agents that Learn Tools): агенты с возможностью автоматического обнаружения инструментов на любом сайте Команда исследователей Salesforce AI представила WALT (Web Agents that Learn Tools) — фреймворк, который преобразует скрытые функции веб-сайтов в повторно используемые инструменты. Что такое WALT? Веб-агенты часто сталкиваются с проблемами при изменении макетов или выполнении длинных последовательностей действий. WALT решает эти проблемы, анализируя функциональность сайта в автономном режиме и предоставляя инструменты, которые инкапсулируют навигацию, выборку, извлечение и дополнительные агентские шаги...