Transparence
Notre méthode
L’objectif est de rendre chaque proposition compréhensible, vérifiable et corrigeable.
1. Collecter
Nous conservons la formulation écrite, la date, l’auteur, le contexte et le lien vers la source originale.
2. Qualifier
Chaque source est identifiée comme primaire, secondaire ou contextuelle. Une source médiatique ne devient pas automatiquement une position officielle.
3. Dédupliquer
Une proposition unique peut recevoir plusieurs sources. Les doublons exacts et probables sont signalés avant publication.
4. Analyser
GPT, Claude et Mistral reçoivent le même dossier documentaire. Leurs réponses sont conservées et affichées séparément pour comparer les sources, les raisonnements, les notes et les abstentions.
5. Vérifier
Les contrôles automatiques vérifient les preuves, la cohérence et les doublons. Une revue humaine intervient seulement en cas d’ambiguïté, de conflit de sources ou de sujet sensible. La confiance dans l’attribution indique à quel point les sources permettent d’identifier l’auteur et de relier fidèlement la mesure à ce qu’il a effectivement déclaré. Elle ne mesure ni la qualité ni la faisabilité de la mesure.
6. Noter et corriger
La grille 2.1 attribue à chaque critère l’une de cinq bandes observables et sourçables, puis fixe automatiquement sa valeur médiane parmi 10, 30, 50, 70 et 90. Le même périmètre est envoyé à tous les modèles ; les agrégats sont calculés par le système, pas par les IA.
Un score documentaire, pas un jugement politique
Chaque critère porte explicitement l’un des statuts suivants : assessed s’il est applicable et évalué avec une valeur, une bande et des preuves conformes ; Non applicable s’il n’existe aucune voie d’effet plausible dans le périmètre, voies examinées et raison à l’appui ; abstention si une source inaccessible/incomplète, un périmètre indéterminé ou une contradiction empêche réellement de l’évaluer.
Le manque de détails dans un corpus pourtant exploitable n’est pas une abstention ni un statut Non applicable : il réduit la note documentaire du critère concerné. Le score global est calculé seulement si tous les critères applicables sont évalués. Les critères Non applicable sont exclus du dénominateur et les poids restants renormalisés ; une véritable abstention interdit l’agrégation. L’incertitude reste distincte de la note.
Les notes publiques de méthodologie 1.0 et de grille 2.0 sont conservées sans recalcul et identifiées comme historiques ; elles ne sont pas présentées comme des résultats de la grille 2.1.
Le code et les données seront publiés en open source.