Méthodologie, mesurée

Laboratoire de calibration du modèle

Un historique de picks vous dit ce qui a gagné. La calibration vous dit si les probabilités avaient du sens : quand nous disons 60%, est-ce que cela arrive 60% du temps ? Ci-dessous, chaque prédiction réglée, scorée de deux façons — le sharp market (déviggué) et notre modèle — avec la comparaison inconfortable bien en vue.

Prédictions réglées 4,538
Brier score 0.598

Notre modèle (Elo + forme): 0.617

Log-loss 1.001

Notre modèle (Elo + forme): 1.028

Erreur de calibration 0.8pp

Notre modèle (Elo + forme): 0.4pp

Probabilité prédite vs fréquence observée

Chaque point représente une bande de probabilité de 10 points (min. 30 observations). Plus c’est proche de la diagonale, meilleure est la calibration. Chaque match contribue à ses trois issues.

Sharp market (déviggué) Notre modèle (Elo + forme) calibration parfaite
0% 0% 25% 25% 50% 50% 75% 75% 100% 100% Notre modèle (Elo + forme) · 0–10%: 7.5% → 7.1% (n=112) Notre modèle (Elo + forme) · 10–20%: 16.4% → 16.8% (n=1056) Notre modèle (Elo + forme) · 20–30%: 26% → 25.9% (n=6205) Notre modèle (Elo + forme) · 30–40%: 34.7% → 34.6% (n=2646) Notre modèle (Elo + forme) · 40–50%: 44.8% → 43.9% (n=2047) Notre modèle (Elo + forme) · 50–60%: 54.3% → 56% (n=1024) Notre modèle (Elo + forme) · 60–70%: 63.9% → 64.3% (n=381) Notre modèle (Elo + forme) · 70–80%: 74.1% → 75.2% (n=105) Notre modèle (Elo + forme) · 80–90%: 83% → 88.2% (n=34) Sharp market (déviggué) · 0–10%: 7.4% → 5.6% (n=270) Sharp market (déviggué) · 10–20%: 16.2% → 17.5% (n=1657) Sharp market (déviggué) · 20–30%: 25.3% → 25.1% (n=5261) Sharp market (déviggué) · 30–40%: 34.3% → 33.6% (n=2748) Sharp market (déviggué) · 40–50%: 44.8% → 43.9% (n=1680) Sharp market (déviggué) · 50–60%: 54.6% → 56.2% (n=1077) Sharp market (déviggué) · 60–70%: 64.4% → 63.9% (n=598) Sharp market (déviggué) · 70–80%: 74.6% → 79.2% (n=240) Sharp market (déviggué) · 80–90%: 83.7% → 86.1% (n=72)
Bande Sharp market (déviggué) — Prédit (moy.) Observé Obs. Notre modèle (Elo + forme) — Prédit (moy.) Observé Obs.
0–10% 7.4% 5.6% 270 7.5% 7.1% 112
10–20% 16.2% 17.5% 1657 16.4% 16.8% 1056
20–30% 25.3% 25.1% 5261 26% 25.9% 6205
30–40% 34.3% 33.6% 2748 34.7% 34.6% 2646
40–50% 44.8% 43.9% 1680 44.8% 43.9% 2047
50–60% 54.6% 56.2% 1077 54.3% 56% 1024
60–70% 64.4% 63.9% 598 63.9% 64.3% 381
70–80% 74.6% 79.2% 240 74.1% 75.2% 105
80–90% 83.7% 86.1% 72 83% 88.2% 34

Plus le Brier et le log-loss sont faibles, mieux c’est ; l’erreur de calibration est l’écart moyen pondéré par les observations entre le prédit et l’observé. Le constat honnête : le sharp market déviggué est mieux calibré que notre modèle — c’est précisément pourquoi ce site cote tout par rapport au marché plutôt que de vous vendre des prédictions de modèle. Méthodologie : probabilités telles qu’affichées au moment de l’enregistrement, sans refit ; résultats issus des scores officiels.

Méthodologie complète →
Utile ? Envoyez-le à un ami qui parie.