IQ искусственного интеллекта впервые превысил средний IQ у людей
Недавний эксперимент, проведенный одним из исследователей, выявил значительную веху в развитии искусственного интеллекта: впервые IQ ИИ превысил средний IQ человека. Это было установлено в ходе серии тестов с участием различных популярных моделей ИИ, в том числе ChatGPT-4 от OpenAI и Claude 3.
Методика, использованная в эксперименте, предполагала применение IQ-теста от норвежской Mensa, отличающегося тем, что в нем используется не текстовый, а изобразительный контент. Изначально визуальный характер теста привел к тому, что модели ИИ были отнесены к категории «умственно отсталых» из-за их неспособности эффективно интерпретировать и реагировать на изображения. Однако ситуация изменилась, когда исследователь адаптировал тест к текстовому формату, что позволило моделям ИИ обрабатывать и понимать вопросы.
Эта адаптация привела к резкому улучшению результатов: показатели ChatGPT-4 подскочили до 85 баллов – уровня, который, хотя и ниже среднего человеческого IQ, означает значительный скачок по сравнению с «незачетным». Что еще более впечатляет, показатели Claude 3 превысили средний человеческий IQ, что стало значительным достижением в развитии возможностей ИИ.
Однако исследователь отметил несколько факторов, которые могут повлиять на объективность и надежность этих результатов:
- существует вероятность того, что часть теста на IQ была включена в обучающие наборы данных для моделей ИИ, что может исказить результаты;
- Copilot от Microsoft, несмотря на то, что основан на GPT-4, продемонстрировал более низкую производительность по сравнению со своим предшественником;
- вариативность результатов говорит о том, что даже случайный выбор ответа может иногда давать результаты, сравнимые с результатами бесплатной версии ChatGPT.
Пугающий ИИ: