المنهجية، مقاسة

مختبر معايرة النماذج

سجل الاختيارات يخبرك بما فاز. المعايرة تخبرك إن كانت الاحتمالات تعني شيئًا: عندما نقول 60%، هل يحدث ذلك 60% من الوقت؟ أدناه، كل تنبؤ مُسوَّى، مُقاس بطريقتين — السوق sharp (بعد إزالة الهامش) ونموذجنا — مع المقارنة غير المريحة أمامك.

تنبؤات مُسوّاة 4,538
Brier score 0.598

نموذجنا (Elo + form): 0.617

Log-loss 1.001

نموذجنا (Elo + form): 1.028

خطأ المعايرة 0.8pp

نموذجنا (Elo + form): 0.4pp

الاحتمال المتوقع مقابل التردد الفعلي

كل نقطة تمثل شريحة احتمالية من 10 نقاط (بحد أدنى 30 مشاهدة). كلما اقتربت من القطر، كانت المعايرة أفضل. كل مباراة تساهم بنتائجها الثلاث.

السوق sharp (بعد إزالة الهامش) نموذجنا (Elo + form) معايرة مثالية
0% 0% 25% 25% 50% 50% 75% 75% 100% 100% نموذجنا (Elo + form) · 0–10%: 7.5% → 7.1% (n=112) نموذجنا (Elo + form) · 10–20%: 16.4% → 16.8% (n=1056) نموذجنا (Elo + form) · 20–30%: 26% → 25.9% (n=6205) نموذجنا (Elo + form) · 30–40%: 34.7% → 34.6% (n=2646) نموذجنا (Elo + form) · 40–50%: 44.8% → 43.9% (n=2047) نموذجنا (Elo + form) · 50–60%: 54.3% → 56% (n=1024) نموذجنا (Elo + form) · 60–70%: 63.9% → 64.3% (n=381) نموذجنا (Elo + form) · 70–80%: 74.1% → 75.2% (n=105) نموذجنا (Elo + form) · 80–90%: 83% → 88.2% (n=34) السوق sharp (بعد إزالة الهامش) · 0–10%: 7.4% → 5.6% (n=270) السوق sharp (بعد إزالة الهامش) · 10–20%: 16.2% → 17.5% (n=1657) السوق sharp (بعد إزالة الهامش) · 20–30%: 25.3% → 25.1% (n=5261) السوق sharp (بعد إزالة الهامش) · 30–40%: 34.3% → 33.6% (n=2748) السوق sharp (بعد إزالة الهامش) · 40–50%: 44.8% → 43.9% (n=1680) السوق sharp (بعد إزالة الهامش) · 50–60%: 54.6% → 56.2% (n=1077) السوق sharp (بعد إزالة الهامش) · 60–70%: 64.4% → 63.9% (n=598) السوق sharp (بعد إزالة الهامش) · 70–80%: 74.6% → 79.2% (n=240) السوق sharp (بعد إزالة الهامش) · 80–90%: 83.7% → 86.1% (n=72)
الشريحة السوق sharp (بعد إزالة الهامش) — المتوقع (المتوسط) المشاهد المشاهدات نموذجنا (Elo + form) — المتوقع (المتوسط) المشاهد المشاهدات
0–10% 7.4% 5.6% 270 7.5% 7.1% 112
10–20% 16.2% 17.5% 1657 16.4% 16.8% 1056
20–30% 25.3% 25.1% 5261 26% 25.9% 6205
30–40% 34.3% 33.6% 2748 34.7% 34.6% 2646
40–50% 44.8% 43.9% 1680 44.8% 43.9% 2047
50–60% 54.6% 56.2% 1077 54.3% 56% 1024
60–70% 64.4% 63.9% 598 63.9% 64.3% 381
70–80% 74.6% 79.2% 240 74.1% 75.2% 105
80–90% 83.7% 86.1% 72 83% 88.2% 34

كلما كان Brier وlog-loss أقل كان أفضل؛ وخطأ المعايرة هو متوسط الفجوة المرجح بالمشاهدات بين المتوقع والمشاهد. العنوان الصريح: السوق sharp بعد إزالة الهامش أفضل معايرة من نموذجنا — وهذا بالضبط سبب تسعير هذا الموقع لكل شيء مقابل السوق بدلًا من بيعك تنبؤات نموذجية. المنهجية: الاحتمالات كما عُرضت وقت التسجيل، من دون إعادة ضبط لاحقة؛ والنتائج من النتائج الرسمية.

المنهجية الكاملة →
هل وجدت هذا مفيدًا؟ أرسله إلى صديق يراهن.