Comment lire un résultat
Des conditions communes pour comparer ce qui est comparable.
Un classement a un périmètre
Les solutions sont comparées sur un même corpus, une même édition et un même protocole. Un résultat obtenu sur des emails immobiliers ne vaut pas pour tous les métiers.
Tous les essais comptent
Chaque cas est exécuté cinq fois. Les réponses défavorables restent dans le résultat ; une campagne partielle ne reçoit aucun rang.
Les erreurs critiques passent en premier
Le classement privilégie d’abord le moins d’erreurs critiques, puis le plus de réponses utiles. Les ex æquo sont conservés. Une indisponibilité produit est distinguée d’une panne de l’infrastructure.
Les corpus sont relus indépendamment
Un autre contributeur, sans affiliation commune avec l’auteur, relit la version exacte du corpus. La validation est liée à cette version ; toute modification demande une nouvelle relecture.
Les scores viennent du protocole
Un éditeur soumet sa solution, pas son classement. La publication exige des captures cohérentes, les vérifications d’exécution et de nettoyage, une calibration qualifiée et des jugements résolus.
Une signature prouve l’origine
Chaque résultat publié dispose d’un manifeste signé et peut être affiché sur le site de son éditeur. La signature permet de vérifier l’origine et l’intégrité ; elle ne prouve pas, à elle seule, l’impartialité de l’opérateur.
Consulter la clé publique de vérification