В последние четыре года появление виртуальных помощников для программистов, казалось бы, должно было облегчить жизнь разработчиков и повысить их производительность. Однако исследование независимой аналитической команды METR показало обратный эффект: использование таких ИИ-инструментов снижает эффективность работы живых программистов в среднем на 19%. Эксперимент с участием 16 опытных разработчиков, работающих с крупными репозиториями открытого исходного кода, выявил, что несмотря на разрешение использовать ИИ-помощников в половине задач, на практике разработчики выполняли их медленнее, чем без таких инструментов.



В числе популярных ассистентов — Copilot от Microsoft, Cursor и российский сервис GigaCode от Сбербанка. В основе большинства из них лежат нейросети от крупных компаний вроде OpenAI, Google DeepMind, Anthropic и xAI. Несмотря на оптимизм участников исследования в отношении ускорения работы с помощью ИИ, реальность оказалась неожиданной: время выполнения задач с ИИ увеличилось, а не уменьшилось. Программисты ожидали сокращение времени на 24%, но получили обратный результат — рост на 19%.

Большинство участников (56%) активно использовали Cursor и прошли обучение работе с этим ассистентом, а 94% хотя бы раз применяли нейросети в процессе работы. Однако даже умение грамотно формулировать запросы (промпты) к ИИ не привело к улучшению производительности, что опровергает популярное мнение о том, что «вайбкодинг» — процесс, при котором нейросеть генерирует весь код по запросам программиста на естественном языке — ускоряет разработку.

Основные причины снижения эффективности, по мнению исследователей, связаны с тем, что создание корректных запросов и ожидание ответа нейросети занимает больше времени, чем написание кода вручную. Кроме того, ИИ испытывает сложности при работе с большими и сложными кодовыми базами, что было характерно для задач в исследовании.

Несмотря на маркетинговые обещания и активное внедрение виртуальных помощников, реальные данные показывают, что ИИ пока не помогает программистам работать быстрее и продуктивнее.