Les outils d'IA ralentissent les développeurs open source expérimentés : un essai contrôlé randomisé
Un essai contrôlé randomisé (ECR) a étudié l'impact des outils d'IA du début 2025 sur la productivité des développeurs open source expérimentés travaillant sur leurs propres référentiels. Étonnamment, les développeurs utilisant des outils d'IA ont mis 19 % plus de temps à terminer les tâches - l'IA les a ralentis. Les chercheurs considèrent ceci comme un instantané des capacités actuelles de l'IA ; ils prévoient de poursuivre cette méthodologie pour suivre l'accélération de l'IA grâce à l'automatisation de la R&D en IA. L'étude explore les facteurs potentiels contribuant au ralentissement et examine les divergences entre cet ECR et d'autres benchmarks et données anecdotiques, soulignant la nécessité de méthodologies d'évaluation diversifiées pour évaluer de manière exhaustive les capacités de l'IA.
Lire plus