Тест на вменяемость: версия для ИИ 🥸
Профессор Канзасского университета испытал ChatGPT нестандартными заданиями: архаизмами, испанскими словами и выдуманными терминами. ИИ верно объяснил 36 из 52 забытых слов, однако в двух случаях придумал значения, а в трёх – просто перевёл их на другие языки.
А вот при сопоставлении испанских и английских слов чат-бот не смог провести простейшие аналогии. Зато он блестяще справился с вымышленными словами – его оценки совпали с человеческими. Модель даже сама создала парочку новых слов, например, «rousrage» («проснебешенство», то есть злость от резкого пробуждения).
Получается вывод такой: ChatGPT точен в работе с данными, но при неуверенности пытается выдать свои фантазии за действительность. Зато в творческих задачах он может быть полезным помощником, главное всегда проверять его ответы.
Согласны?
#ИИсследование
