Стэнфордский университет в США опубликовал результаты исследования, которое выявило тревожные и повсеместные ошибки среди трех популярных моделей в широком спектре юридических задач.
Ученые указывают, что в 69–88% случаях площадки неверно отвечают на вопросы о судебной практике и конкретных кейсах.
— ChatGPT 3.5 от OpenAI ошибся в 69% случаев.
— Программа PaLM2 от Google — в 72% вопросов,
— Llama2 от Meta* — в 88%.
Вывод исследователей: искусственный интеллект еще не способен проводить юридический анализ ситуации, которым оперируют в работе адвокаты. Внедрение ИИ в юридическую практику должно вестись под тщательным контролем человека.
*запрещённая на территории РФ организация.
AdvoCall — сервис для вызова или консультации с адвокатом в экстренной ситуации.