AI 도구가 숙련된 오픈소스 개발자의 속도를 늦춘다: 무작위 대조 시험

무작위 대조 시험(RCT)은 2025년 초 AI 도구가 자신의 저장소에서 작업하는 숙련된 오픈소스 개발자의 생산성에 미치는 영향을 조사했습니다. 놀랍게도 AI 도구를 사용하는 개발자는 도구를 사용하지 않는 개발자보다 작업 완료에 19% 더 오래 걸렸습니다. AI 때문에 작업 속도가 느려진 것입니다. 연구자들은 이를 현재 AI 기능의 스냅샷으로 보고 AI 연구 개발 자동화에 따른 AI 가속을 추적하기 위해 이 방법론을 계속할 계획입니다. 본 연구는 이 속도 저하에 기여할 수 있는 잠재적인 요인을 조사하고 이 RCT와 다른 벤치마크 및 일화적 증거 간의 불일치를 조사하여 AI 기능을 포괄적으로 평가하기 위해 다양한 평가 방법이 필요함을 강조합니다.