89 подписчиков
🧐 Исследователь провел исследование для оценки производительности генеративного ИИ на экзамене по праву для студентов Университета Вуллонгонга. Экзамен состоял из двух частей: в одной нужно было оценить кейс по уголовным делам, а в другой были короткие вопросы и эссе 📚.
🤖 В исследовании использовались различные модели ИИ для генерации ответов на вопросы экзамена. Некоторым моделям давались подсказки и соответствующее правовое содержание, чтобы улучшить результат 👨⚖️.
📉 Результаты показали, что хотя ответы, сгенерированные ИИ, могли имитировать стиль письма человека, им было сложно справляться с комплексными вопросами, требующими глубокого правового анализа. ИИ лучше всего справился с эссе, но не впечатлил в сложных задачах по юридическому мышлению ⚖️.
📝 Производительность ИИ: работы ИИ без подсказок набрали в среднем только 4,3% от оценок студентов. Две работы еле прошли, а три провалились. С подсказками работы набрали в среднем 39,9% от оценок студентов. Одна работа набрала 73,3%, другая — 78%, но три работы оказались не впечатляющими, получив 50%, 51,7% и 60% 📊.
👨🏫 Отзывы преподавателей: преподаватели не подозревали, что ответы были сгенерированы ИИ, что указывает на потенциал ИИ в мимикрии студенческих ответов 💡.
🧠 Исследование пришло к выводу, что генеративный ИИ пока не готов заменить человека в интеллектуально сложных задачах, таких как экзамены по праву. Вместо этого ИИ следует рассматривать как инструмент для усиления человеческих возможностей. Образование должно сосредоточиться на развитии навыков студентов для совместной работы с ИИ и критического анализа его работы 🌟.
#neuroco #нейроконтент #машинноеобучение #языковыемодели #нейросеть #нейронка #ArtificialIntelligence
1 минута
5 октября 2024