Her sabah ücretsiz futbol tahminleri yayınlayan ayrı bir web sitesi kategorisi var: bir fikstür listesi, bir tahmin, bazen yanında bir yüzde. Bunları çok kişi okuyor. Neredeyse hiç kimse kontrol etmiyor, çünkü kontrol zahmetli — tahmini maç başlamadan önce kaydetmeniz, sonuçları beklemeniz ve gerçekte hangi fiyattan işlem yapabileceğinizi bilmeniz gerekir.
Bizim altyapımız zaten Telegram’daki tipster’lar için tam olarak bunu yapıyor. Bu yüzden onu daha bilinen ücretsiz sitelerden ikisine, Statarea ve Zulubet’e yönelttik ve ölçmeye başladık.
Bu makale bir hüküm değil. Yöntemdir; artı ilk gün verisidir. Bunu şimdi yayımlıyoruz ki sonradan kimse saati, sayılar işine geldiği anda başlattığımızı iddia edemesin.
Çoğu "doğrulama" servisinin atladığı kısım 5. adım. Diğer tüm sayıların bir anlamı olup olmadığına karar veren de bu kısım.
| Statarea | Zulubet | |
|---|---|---|
| Okunan genel tahminler | 65 | 82 |
| Kapsadığımız bir fikstürle eşleşen | 19 | 28 |
| Şu ana kadar kapatılan | 19 | 5 |
| Doğru | 7 | 2 |
| İsabet oranı | 36.8% | 40.0% |
| Bu seçimlerde ortalama oran | 2.10 | 2.21 |
| Gerekli başa baş isabet oranı | 47.6% | 45.3% |
İkisi de, seçimlerinin taşıdığı fiyatlarda ihtiyaç duyacakları isabet oranının altında. Ve her iki sayı da anlamsız, çünkü 19 ve 5 kapanmış tahmin gürültüdür. Tek bir iyi akşam onları on puan oynatır. Yine de yayımlıyoruz; çünkü alternatifi — örneklem birilerini hoş gösterene kadar sessizce beklemek — bu sektörün itibarını böyle kazandırdı.
Bir ay sonra önemli olacak iki sütun sondaki iki sütun. İsabet oranı tek başına hiçbir şeyi çözmez: sadece kısa oranlı favorileri tahmin eden bir site %70 doğru olabilir ve yine de para kaybedebilir; bunu 25,890 maçta popüler bir AI tipster üzerinde ayrıntılı biçimde ölçtük. Asıl belirleyici olan, alabileceğiniz orana karşı başa baş oranına kıyasla isabet; bunun ötesinde ise closing line value’dur.
İlk gün okunan 147 tahminin 47’sini eşleştirebildik. Bu onların ya da bizim başarısızlığımız değil — bu siteler bizim fiyatladığımız 83 ligden çok daha fazla müsabakayı kapsıyor. Kapsamadığımız bir ligdeki tahmini dürüstçe notlayamayız; bu yüzden ayrı tutulur ve sessizce atılmaz ya da daha kötüsü, kayıp diye sayılmaz.
Telegram tipster’larını denetlerken bulduğumuz desen de aynıydı: 46 kanalda 1,279 kamuya açık seçim okuduk ve 567’sini kapatabildik. Ölçülebilir alt küme her zaman ilan edilen kayıttan daha küçüktür; boyutunu söylemeyen her denetim, kontrol edilmekten çok güvenilmeyi istiyordur.
Statarea bir tahmin yayımlıyor. Zulubet ise home, draw ve away için olasılık yayımlıyor ve en büyüğünü vurguluyor — bu, çoğu ücretsiz siteden daha fazlası ve siteyi daha sıkı bir şekilde kontrol edilebilir kılıyor.
Olasılık, yanlışlanabilir bir iddiadır. Bir tahminci birkaç yüz kez %70 diyorsa, sonuç yaklaşık %70 oranında gerçekleşmelidir. Eğer %50 gerçekleşiyorsa, o sayı süstür. Artık Zulubet’in yayımladığı her olasılığı nihai sonuçla birlikte saklıyoruz; böylece zaman içinde bu sayfa yalnızca "closing line’ı geçiyor mu" sorusuna değil, "söylenen olasılıklar hiç kalibre mi" sorusuna da cevap verebilir — kendi modelimizde uyguladığımız aynı test; kayıt için, piyasanın altında kaldıktan sonra yayımladık.
Veri geldikçe her iki sayfa da güncelleniyor ve her site için en az 30 kapanmış tahmin olana kadar hüküm saklanıyor:
Eğer sayılar herhangi bir site için olumlu çıkarsa, bunu söyleyeceğiz. Kendi kaybettiğimiz haftalarımızı, kendi modelimizin piyasa kadar iyi kalibre olmamasını ve kendi closing line value’muzu geçici olarak otuz puan şişiren bir ölçüm hatasını yayımladık. Kamuya açık ölçüm yapmanın amacı, sonucun bizim seçebileceğimiz bir şey olmamasıdır.
Yöntem notları: tahminler sitelerin genel sayfalarından günde bir kez, ayırt edici bir user agent ile okunur; ham sayfalar özel olarak arşivlenir ve asla yeniden yayımlanmaz. Fikstür eşleştirmesi, bir alias tablosu ile takım adı normalizasyonu kullanır; eşleşmeyen seçimler doğrulanamaz olarak işaretlenir ve kapsanmayan müsabakalardaki seçimler kapsam dışıdır — ikisi de kayıp sayılmaz. Tespit anındaki fiyat, okuma sırasında o seçim için elimizdeki en iyi soft-bookmaker fiyatıdır. Closing line value = tespit anındaki fiyat ÷ sharp kapanış fiyatı − 1, aynı piyasada. İki siteyle de herhangi bir bağlantımız veya ticari ilişkimiz yoktur.