sebsauvage - Mastodon
▻https://framapiaf.org/@sebsauvage/114833287629627467
Les boîtes qui vendent l’IA prétendent que leur produit va vous faire gagner énormément de temps en développement.
Une étude scientifique a été réalisée.
Conclusion de cette étude : Les développeurs qui utilisent des IA mettent 19% de temps en PLUS à accomplir les tâches.
Effet psychologique intéressant : Les développeurs utilisant des IA (donc 19% plus lents) étaient persuadés d’être 20% plus rapides que les autres.
Measuring the Impact of Early-2025 AI on Experienced Open-Source Developer Productivity - METR
►https://metr.org/blog/2025-07-10-early-2025-ai-experienced-os-dev-study
We conduct a randomized controlled trial (RCT) to understand how early-2025 AI tools affect the productivity of experienced open-source developers working on their own repositories. Surprisingly, we find that when developers use AI tools, they take 19% longer than without—AI makes them slower. We view this result as a snapshot of early-2025 AI capabilities in one relevant setting; as these systems continue to rapidly evolve, we plan on continuing to use this methodology to help estimate AI acceleration from AI R&D automation .
