Аналитики компании Uplevel провели исследование, которое показало неэффективность использования ИИ-инструментов при написании программного кода. Исследование проводилось в течение двух трёхмесячных периодов с участием 800 разработчиков.
Во время первого периода программисты работали при помощи традиционных инструментов, тогда как во втором пользовались ассистентом GitHub Copilot. В результате количество ошибок в коде выросло на 41%. К тому же, как отметили разработчики, написанные ИИ коды сложно анализировать на предмет неточностей, поэтому код проще написать самому.
Гендиректор фирмы по разработке программного обеспечения Gehtsoft USA Иван Гехт подтвердил, что код, сгенерированный ИИ, действительно сложен для понимания и корректировки, поэтому иногда бывает эффективнее просто переписать его с нуля.
С другой стороны, техдиректор облачного провайдера Innovative Solutions Трэвис Рел сообщил, что благодаря таким инструментам, как Claude Dev и Copilot, производительность разработчиков выросла в три раза.