Разработка YandexGPT из России показала превосходство над зарубежным GPT 3.5 в русскоязычной области. Из заявления пресс-службы компании «Яндекс» стало известно, что в 63% ситуаций российская модель YandexGPT 2 превзошла OpenAI GPT 3.5 в точности ответов на вопросы на русском языке.
Методика исследования включала параллельное сравнение ответов (метод Side by Side, SBS), где обе модели обрабатывали одни и те же запросы. Специалисты, обучающие AI, выбирали наилучший ответ, не осведомленные о том, какая модель его сформировала. Исследование базировалось на запросах, взятых из анонимных обращений пользователей услуг «Яндекса».
Алексей Гусаков, руководитель технического отдела «Яндекс Поиска», подчеркнул основную цель сравнения YandexGPT 2 с альтернативными моделями - удовлетворение потребностей клиентов и бизнеса, а не простое накопление статистических данных. Он уточнил, что важным элементом выбора вопросов для сравнения стали реальные пользовательские запросы их сервисов.
YandexGPT спосо