Исследование METR: программисты работают медленнее при использовании ИИ
Согласно исследованию, проведенному некоммерческой организацией METR, инструменты искусственного интеллекта (ИИ), предназначенные для автоматизации процесса написания кода, могут негативно сказаться на производительности опытных разработчиков программного обеспечения. В рамках исследования было установлено, что использование таких систем не приводит к сокращению времени выполнения задач, а, напротив, увеличивает его на 19%.
Эксперимент, в котором приняли участие 16 квалифицированных разработчиков, включал решение 246 реальных задач из крупных открытых репозиториев программного кода. Половина задач была решена с применением инструментов ИИ, а другая половина — традиционными методами. Участники исследования ожидали, что использование ИИ позволит им сократить время выполнения задач на 24%, однако фактические результаты оказались противоположными.
Читайте также
Замедление процесса разработки, по мнению исследователей, обусловлено необходимостью формулирования текстовых запросов к ИИ и ожиданием получения ответов, что приводит к дополнительным временным затратам. Кроме того, инструменты ИИ демонстрируют ограниченную эффективность при работе с крупными и сложными кодовыми базами, что также негативно сказывается на общей производительности.
Несмотря на то что 94% участников исследования имели опыт работы с веб-интерфейсами языковых моделей и прошли обучение по использованию системы Cursor, эти навыки не способствовали ускорению процесса разработки. Исследователи подчеркивают, что технологии ИИ продолжают развиваться, и результаты данного исследования могут устареть в течение нескольких месяцев, сообщает Bzzz.
