Cinq modèles, un seul avis : la limite du consensus

La limite honnête de cette page, à connaître avant d’en tirer un pari : tous vos modèles partagent la même formule. Seuls les coefficients changent.

Ce que ça implique

Ce ne sont donc pas cinq opinions indépendantes. C’est une opinion mesurée cinq fois avec des réglages voisins.

Leur accord est en grande partie mécanique : ils lisent les mêmes statistiques, les normalisent de la même façon, et les combinent avec la même fonction logistique. Si un combattant domine sur la plupart des métriques, tous vos modèles le désigneront, quelles que soient vos pondérations.

Lire cet accord comme une confirmation reviendrait à se rassurer tout seul.

Le piège statistique sous-jacent

La valeur d’un consensus vient de l’indépendance de ses composantes. Cinq analystes qui arrivent à la même conclusion par des chemins différents constituent une information forte. Cinq copies du même analyste avec des humeurs légèrement différentes n’en constituent aucune.

En termes statistiques : le nombre effectif d’observations indépendantes est bien inférieur au nombre de modèles. Cinq modèles corrélés à 90 % valent à peine mieux qu’un seul.

Ce qui ferait vraiment monter la valeur d’un consensus

Des modèles construits sur des entrées différentes, pas seulement des poids différents :

• un modèle qui pondère selon la qualité de l’opposition rencontrée ;
• un modèle qui intègre l’interaction des styles — défense de takedown contre précision de takedown, plutôt que deux scores calculés séparément ;
• un modèle qui regarde la dynamique récente plutôt que les moyennes de carrière ;
• un modèle qui part des cotes d’ouverture plutôt que des statistiques.

Tant que la source d’information et la formule sont communes, le consensus mesure la stabilité de votre lecture face à un changement de pondération. C’est utile — c’est un test de robustesse — mais ce n’est pas une confirmation indépendante.