HSCodeComp teste si les agents appliquent des regles metier hierarchiques, au-dela de la recherche web ou du code. L enjeu ne tient pas seulement a l annonce, mais a la maniere dont elle modifie les criteres d evaluation pour les developpeurs, les entreprises ou les pouvoirs publics.
Ce qui change
Les faits essentiels sont les suivants: ACL 2026 main conference paper, 632 realistic product entries, 32 categories, 26 customs experts, best current agent 46.8% at 10-digit codes, Marco Agent 65.0%, human experts 95.0%. Ils permettent de distinguer les elements verifiables du discours de lancement.
Pourquoi c est important
La concurrence dans l IA ne porte plus seulement sur la puissance des modeles. Les prix, les droits d acces, le materiel, l energie, la securite et l exploitation deviennent decisifs.
Ce qu il faut suivre
Le prochain test sera l execution: un produit, une plateforme ou une politique devra tenir dans des environnements clients reels, pas seulement en demonstration.
Sources verifiees: QbitAI, CocoLoop, ACL Anthology 2026.acl-long.937, arXiv 2510.19631, AIDC-AI Marco-DeepResearch GitHub.