ИИ снизил продуктивность разработчиков вопреки ожиданиям
Ожидали, что ИИ сэкономит время? Ошиблись. В эксперименте с участием 16 опытных разработчиков (в среднем 5 лет опыта) выяснилось, что задачи с использованием ИИ-инструментов выполнялись на 19% дольше, чем без них. Участники предсказывали 24%-ное ускорение, но получили обратный эффект. Исследование провели METR (Model Evaluation and Threat Research).
Основные причины:
- Контекст. Разработчики работали над своими проектами, где уже имели глубокое понимание задачи. ИИ-инструменты (например, Cursor Pro или Claude 3.5/3.7 Sonnet) этого контекста лишены, поэтому их выводы требовали доработки.
- Отладка. Даже полезные результаты ИИ приходилось «чистить» и адаптировать под конкретные нужды, что отнимало время.
- Ожидание. Часть времени ушла на написание промптов и генерацию ответов.
Один из участников, Philipp Burckhardt, признал: «Возможно, ИИ не помог мне так, как я ожидал, а может, даже помешал».
Что говорят экономисты
Результаты исследования противоречат оптимистичным прогнозам о росте производительности благодаря ИИ. Например:
- PwC обещал +15% к ВВП США к 2035 году.
- Goldman Sachs прогнозировал +25% к продуктивности.
Андерс Хумлум, экономист из Чикагского университета, отмечает: «Для опытных специалистов ИИ может давать diminishing returns». Его исследование в Дании показало лишь 3%-ный рост производительности среди пользователей ИИ.
Нобелевский лауреат Дарон Аджемоглу и вовсе считает, что ИИ повысит эффективность только 4.6% задач в экономике США: «Автоматизировать всё подряд — пустая трата времени».
ИИ — не панацея. Для опытных разработчиков он может стать скорее тормозом, чем ускорителем. Ключевые моменты:
- ИИ требует адаптации под конкретные задачи.
- Экономия времени возможна лишь при четком понимании, когда его использовать.
- Слепая вера в технологии без анализа их реального эффекта — ошибка.
Как сказал один из авторов исследования: «Давайте сначала измерим, а потом решим». Ирония в том, что сами разработчики ИИ теперь в этом убедились.
