Спойлер: чаще всего они справляются хорошо.
А вот первенство в исследовании получил ChatGPT.
Научная группа Университета Висконсин-Стаут организовала и провела исследование, где оценила способность нейросети отличать правдивые новости от лживых.
Согласно полученным результатам, любая из языковых моделей разбирается в истинности хуже человеческого разума, а самой способной моделью стала ChatGPT-4.
Участники исследования — самые популярные и продвинутые:
— Chat GPT 3.5
— Chat GPT 4.0
— Bard
— AI Bing AI
Как проходило исследование?
Всем ботам выдали одинаковые заголовки и текста. Каждая новость перед этим проверялась научным работником. Бот давал свое мнение по поводу прочитанного. Показатель эффективности зависел от точности ответов, полученных от искусственного интеллекта.
Наилучший результат показал Chat GPT-4.0, который смог правильно ответить в 71%. Остальные дали результат 62-64%.
Результаты
Это мероприятие показало, что нейросети прогрессируют в анализе информации. Но разница между человеческим и искусственным разумом всё-таки заметна. И учёные не сдаются, а хотят ещё больше прокачать нейросети, чтобы они могли давать только правдивые ответы на вопросы.
💡Подписывайся на наш канал — здесь очень много интересного!
🎤 А еще у нас есть телеграм, где каждый день выходит по несколько полезных публикаций: https://t.me/AI_Russia_community
До встречи!