Вот и подъехали данные первых исследований. Выяснилось, что ИИ-помощники не приносят особой пользы разработчикам.
Наоборот, ИИ только добавляет ошибок в коде. За время эксперимента их число увеличилось на 41%.
Большую часть запросов ассистенты истолковывают неверно. Получившиеся ответы все равно приходится анализировать. В итоге это только усложняет процесс разработки и приближает к выгоранию.
Исследование проводила компания Uplevel. В нем приняли участие 800 разработчиков. Длительность — два трёхмесячных периода. Первые три месяца программисты использовали традиционные ИИ-инструменты, вторые три месяца — GitHub Copilot.
По словам аналитика данных в Uplevel Мэтта Хоффмана, результаты исследования опровергли все ожидания.