Décrypter SWE-bench : Que mesure réellement ce benchmark ?
SWE-bench est devenu la "note du bac" pour les capacités de codage de l'IA. Mais dépasser les 80 % signifie-t-il que l'IA peut vraiment travailler comme programmeur ? L'article analyse la méthode de test, le classement actuel et les limites inhérentes de ce benchmark.