Apakah situs prediksi sepak bola gratis akurat? Kami mulai mengukurnya, secara publik

Ada satu kategori situs yang setiap pagi menerbitkan prediksi sepak bola gratis: daftar pertandingan, sebuah tip, kadang disertai persentase. Banyak orang membacanya. Hampir tidak ada yang memeriksanya, karena memeriksa itu merepotkan — Anda harus mencatat apa yang diprediksi sebelum kick-off, menunggu hasilnya, dan tahu harga yang sebenarnya bisa Anda ambil.

Kebetulan itu persis yang sudah dilakukan infrastruktur kami untuk tipster di Telegram. Jadi kami arahkan ke dua situs gratis yang cukup dikenal, Statarea dan Zulubet, lalu mulai mengukur.

Artikel ini bukan vonis. Ini metodologinya, plus data hari pertama, dipublikasikan sekarang supaya tidak ada yang nanti menuduh kami memulai penghitungan setelah angka-angkanya terlihat menguntungkan.

Apa yang sebenarnya kami lakukan, sekali sehari

1. Membaca prediksi publik sekali per hari. Satu permintaan per situs, dengan user agent yang bisa diidentifikasi dan tautan kontak. Kami mengarsipkan halaman mentah secara privat agar jika tata letak situs berubah dan parser kami rusak, kami bisa membedakan antara "mereka mengubah halaman" dan "mereka mengubah pilihan".
2. Mencocokkan setiap prediksi ke pertandingan nyata di basis data kami, menggunakan normalisasi nama tim dan tabel alias yang sama seperti yang kami pakai untuk audit tipster.
3. Mencatat harga pada saat kami membacanya — harga terbaik yang tersedia di antara soft bookmaker yang kami lacak untuk selection itu. Bukan harga yang kami karang belakangan.
4. Menyelesaikan berdasarkan hasil resmi, dan jika kami punya closing price tajam pada market yang sama, menghitung closing line value: apakah harga saat prediksi dibuat mengalahkan posisi penutupan market?
5. Menerbitkan penyebutnya. Berapa banyak prediksi yang kami baca, berapa yang bisa dicocokkan, berapa yang kami selesaikan, dan berapa yang punya closing line yang terukur.

Langkah 5 adalah bagian yang paling sering dilewati layanan "verifikasi", dan itulah bagian yang menentukan apakah angka-angka lainnya bermakna atau tidak.

Hari pertama

Keduanya berada di bawah akurasi yang mereka perlukan pada harga yang mereka bawa. Dan kedua angka ini tidak berarti, karena 19 dan 5 prediksi yang selesai masih noise. Satu malam yang bagus bisa menggerakkannya sepuluh poin. Kami tetap menuliskannya, karena alternatifnya — diam menunggu sampai sampel terlihat bagus untuk seseorang — adalah cara industri ini membangun reputasinya.

Dua kolom yang akan penting dalam sebulan adalah dua yang terakhir. Akurasi sendiri tidak pernah menyelesaikan apa pun: situs yang hanya memberi tip favorit dengan harga pendek bisa benar 70% dari waktu, tetapi tetap rugi, seperti yang kami ukur secara rinci pada seorang tipster AI populer dalam 25,890 pertandingan. Yang menyelesaikannya adalah akurasi dibandingkan tingkat impas pada odds yang bisa Anda ambil, dan setelah itu, closing line value.

Mengapa hanya sepertiga yang terukur

Dari 147 prediksi yang dibaca pada hari pertama, kami hanya bisa mencocokkan 47. Itu bukan kegagalan mereka atau kami — situs-situs ini mencakup jauh lebih banyak kompetisi daripada 83 liga yang kami beri harga. Prediksi pada liga yang tidak kami cakup tidak bisa dinilai secara jujur, jadi dipisahkan dan dihitung terpisah, bukan diam-diam dihapus atau, lebih buruk, dihitung sebagai kekalahan.

Pola yang sama juga kami temukan saat mengaudit tipster Telegram: dari 46 channel kami membaca 1,279 pick publik dan hanya bisa menyelesaikan 567 di antaranya. Subset yang terukur selalu lebih kecil daripada rekor yang diiklankan, dan audit apa pun yang tidak memberi tahu Anda ukurannya meminta untuk dipercaya, bukan diperiksa.

Zulubet mempublikasikan probabilitas, yang membuka tes yang lebih keras

Statarea menerbitkan tip. Zulubet menerbitkan probabilitas untuk home, draw, dan away, lalu menyorot yang terbesar — itu lebih dari yang ditawarkan kebanyakan situs gratis, dan membuat situs itu bisa diperiksa dengan cara yang lebih ketat.

Probabilitas adalah klaim yang bisa dipalsukan. Jika seorang peramal mengatakan 70% pada beberapa ratus kesempatan, hasilnya seharusnya terjadi sekitar 70% dari waktu. Jika yang terjadi 50% dari waktu, angka itu hanyalah hiasan. Kami kini menyimpan setiap probabilitas yang dipublikasikan Zulubet bersama hasil akhirnya, sehingga pada waktunya halaman itu bisa menjawab bukan hanya "apakah ini mengalahkan closing line" tetapi juga "apakah probabilitas yang dinyatakan itu terkalibrasi sama sekali" — tes yang sama yang kami jalankan pada model kami sendiri, yang, untuk dicatat, kami publikasikan setelah hasilnya lebih buruk daripada market.

Apa yang terjadi selanjutnya

Kedua halaman diperbarui seiring data masuk dan tidak akan memberi vonis sampai setidaknya 30 prediksi yang selesai per situs:

• Statarea, diaudit terhadap closing line
• Zulubet, diaudit terhadap closing line

Jika nanti angkanya menguntungkan salah satu situs, kami akan mengatakannya. Kami telah mempublikasikan minggu-minggu rugi kami sendiri, model kami sendiri yang kalibrasinya lebih buruk daripada market, dan bug pengukuran yang sempat menaikkan closing line value kami sendiri tiga puluh poin. Tujuan mengukur secara publik adalah hasilnya bukan milik kami untuk dipilih.

Catatan metode: prediksi dibaca sekali per hari dari halaman publik situs dengan user agent yang mengidentifikasi; halaman mentah diarsipkan secara privat dan tidak pernah dipublikasikan ulang. Pencocokan fixture menggunakan normalisasi nama tim dengan tabel alias; pick yang tidak cocok ditandai tidak dapat diverifikasi dan pick pada kompetisi yang tidak tercakup berada di luar cakupan — keduanya tidak dihitung sebagai kekalahan. Harga saat terdeteksi adalah harga soft-bookmaker terbaik yang kami miliki untuk selection itu pada saat dibaca. Closing line value = harga saat terdeteksi ÷ sharp closing price − 1 pada market yang sama. Kami tidak memiliki afiliasi, dan tidak memiliki hubungan komersial, dengan salah satu situs pun.