Un benchmark mené par Shanghai Jiao Tong University montre que les agents trouvent souvent le bon fichier, mais seulement 14 à 19% des lignes pertinentes.
Ce qui change
L'article source replace ce sujet dans Codage IA, Benchmarks de grands modèles, Agents, Recherche, avec un accent sur les chiffres, les contraintes de déploiement et la pression exercée sur les entreprises comme sur les régulateurs.
Pourquoi c'est important
L'essentiel n'est pas seulement l'annonce. Le signal plus large est que performance, coût, régulation et distribution déterminent désormais quels produits passent de l'expérimentation à l'usage courant.
Sources: CocoLoop, AI coding agents find the right file but miss the exact lines that matter, study shows（The Decoder）；SWE-Explore 基准研究（arXiv，上海交通大学等）