Apakah situs prediksi sepak bola gratis akurat? Kami mulai mengukurnya, secara publik

Ada satu kategori situs web yang menerbitkan prediksi sepak bola gratis setiap pagi: daftar pertandingan, sebuah tip, kadang disertai persentase. Banyak orang membacanya. Hampir tidak ada yang memeriksanya, karena pengecekan itu merepotkan — Anda harus mencatat apa yang diprediksi sebelum kick-off, menunggu hasilnya, lalu tahu harga apa yang benar-benar bisa Anda ambil.

Tepat itulah yang sudah dilakukan infrastruktur kami untuk tipster di Telegram. Jadi kami arahkan ke dua situs gratis yang cukup dikenal, Statarea dan Zulubet, lalu mulai mengukur.

Artikel ini bukan vonis. Ini adalah metode, plus hari pertama data, diterbitkan sekarang supaya nanti tidak ada yang bisa menuduh kami memulai penghitungan setelah angka-angkanya terlihat nyaman.

Apa yang sebenarnya kami lakukan, sekali sehari

1. Membaca prediksi publik sekali per hari. Satu permintaan per situs, dengan user agent yang bisa diidentifikasi dan tautan kontak. Kami mengarsipkan halaman mentah secara privat supaya jika tata letak situs berubah dan parser kami rusak, kami bisa membedakan antara "mereka mengubah halaman" dan "mereka mengubah pilihan mereka".
2. Mencocokkan setiap prediksi dengan pertandingan nyata di basis data kami, menggunakan normalisasi nama tim dan tabel alias yang sama seperti yang kami pakai untuk audit tipster.
3. Mencatat harga pada saat kami membacanya — harga terbaik yang tersedia di antara soft bookmaker yang kami lacak untuk pilihan itu. Bukan harga yang kami buat belakangan.
4. Menyelesaikan berdasarkan hasil resmi, dan jika kami memiliki harga penutupan sharp pada pasar yang sama, menghitung closing line value: apakah harga saat prediksi dibuat mengalahkan posisi pasar saat berakhir?
5. Menerbitkan penyebutnya. Berapa banyak prediksi yang kami baca, berapa banyak yang bisa kami cocokkan, berapa banyak yang sudah kami selesaikan, dan berapa banyak yang punya closing line yang bisa diukur.

Langkah 5 adalah bagian yang paling sering dilewati layanan "verifikasi", dan itu adalah bagian yang menentukan apakah angka-angka lainnya berarti apa pun.

Hari pertama

Keduanya masih di bawah akurasi yang mereka butuhkan pada harga yang dibawa pilihan mereka. Dan kedua angka itu tidak berarti, karena 19 dan 5 prediksi yang sudah diselesaikan masih terlalu sedikit. Satu malam yang bagus saja bisa menggeser mereka sepuluh poin. Kami tetap menampilkannya, karena alternatifnya — diam saja sampai sampelnya menguntungkan seseorang — adalah cara industri ini membangun reputasinya.

Dua kolom yang akan penting sebulan lagi adalah dua yang terakhir. Akurasi saja tidak pernah menyelesaikan apa pun: situs yang hanya memberi tips favorit dengan harga pendek bisa benar 70% dari waktu dan tetap rugi, seperti yang ditunjukkan aritmetika tingkat kemenangan × rata-rata odds. Yang menentukan adalah akurasi dibandingkan dengan tingkat impas pada odds yang bisa Anda ambil, dan setelah itu, closing line value.

Mengapa hanya sepertiga yang bisa diukur

Dari 147 prediksi yang dibaca pada hari pertama, kami bisa mencocokkan 47. Itu bukan kegagalan mereka atau kami — situs-situs ini mencakup jauh lebih banyak kompetisi daripada 83 liga yang kami beri harga. Prediksi pada liga yang tidak kami cakup tidak bisa dinilai secara jujur, jadi dikesampingkan dan dihitung terpisah, bukan dibuang diam-diam atau, lebih buruk lagi, dicatat sebagai kalah.

Pola yang sama kami temukan saat mengaudit tipster Telegram: dari 46 channel yang kami baca, ada 1,279 pilihan publik dan hanya 567 yang bisa kami selesaikan. Subset yang bisa diukur selalu lebih kecil daripada rekor yang diiklankan, dan audit apa pun yang tidak memberi tahu Anda ukurannya pada dasarnya meminta untuk dipercaya, bukan diperiksa.

Zulubet mempublikasikan probabilitas, yang membuka pengujian lebih keras

Statarea mempublikasikan sebuah tip. Zulubet mempublikasikan probabilitas untuk kandang, seri, dan tandang, lalu menyorot yang terbesar — itu lebih dari yang ditawarkan kebanyakan situs gratis, dan membuat situs itu bisa diuji dengan cara yang lebih ketat.

Probabilitas adalah klaim yang bisa dibuktikan salah. Jika seorang peramal memberi angka 70% pada beberapa ratus kejadian, hasilnya seharusnya terjadi sekitar 70% dari waktu. Jika yang terjadi hanya 50% dari waktu, angka itu cuma hiasan. Sekarang kami menyimpan setiap probabilitas yang dipublikasikan Zulubet bersama hasil akhirnya, sehingga pada waktunya halaman itu bisa menjawab bukan hanya "apakah mengalahkan closing line" tetapi juga "apakah probabilitas yang dinyatakan itu terkalibrasi sama sekali" — pengujian yang sama seperti yang kami lakukan pada model kami sendiri, yang, untuk dicatat, kami publikasikan setelah hasilnya lebih buruk daripada pasar.

Apa yang terjadi selanjutnya

Kedua halaman diperbarui seiring data masuk dan tidak akan memberi vonis sampai setidaknya ada 30 prediksi yang sudah diselesaikan per situs:

• Statarea, diaudit terhadap closing line
• Zulubet, diaudit terhadap closing line

Jika angkanya ternyata menguntungkan salah satu situs, kami akan mengatakannya. Kami sudah mempublikasikan minggu-minggu rugi kami sendiri, model kami sendiri yang kalibrasinya lebih buruk daripada pasar, dan bug pengukuran yang sempat menggelembungkan closing line value kami sendiri sebesar tiga puluh poin. Inti pengukuran secara publik adalah hasilnya bukan milik kami untuk dipilih.

Catatan metode: prediksi dibaca sekali sehari dari halaman publik situs dengan user agent yang mengidentifikasi; halaman mentah diarsipkan secara privat dan tidak pernah diterbitkan ulang. Pencocokan pertandingan menggunakan normalisasi nama tim dengan tabel alias; pilihan yang tidak cocok ditandai tidak dapat diverifikasi dan pilihan pada kompetisi di luar cakupan tidak dihitung — keduanya bukan kekalahan. Harga pada saat terdeteksi adalah harga soft bookmaker terbaik yang kami pegang untuk pilihan itu pada saat dibaca. Closing line value = harga pada deteksi ÷ harga penutupan sharp − 1 pada pasar yang sama. Kami tidak berafiliasi dengan, dan tidak memiliki hubungan komersial dengan, kedua situs tersebut.