Слава - Стань сильней
Качество Агентов: как тестировать непредсказуемое? (Часть 4)
Продолжаем разбирать руководство Google по ИИ-Агентам (Часть 1 - Агенты, Часть 2 - Инструменты, Часть 3 - Память). Если прошлые части были про создание, то эта - про то, как не сойти с ума при тестировании. ▶️ Что такое Качество Агента? Традиционное ПО детерминировано (вход А всегда дает выход Б). Агенты - вероятностны. Они "думают", планируют и могут выбирать разные пути решения одной задачи.
Традиционный тестировщик спрашивает: "Мы собрали продукт правильно?" (по спецификации).
Оценщик Агента спрашивает: "Мы собрали правильный продукт?" (решает ли он задачу пользователя)...