Có cả một nhóm website đăng dự đoán bóng đá miễn phí mỗi sáng: danh sách trận, một tip, đôi khi kèm theo một tỷ lệ phần trăm. Rất nhiều người đọc chúng. Hầu như không ai kiểm tra, vì kiểm tra rất mất công — bạn phải ghi lại dự đoán trước giờ bóng lăn, chờ kết quả, và biết mức giá thực sự bạn có thể đặt.
Đó lại chính là việc hạ tầng của chúng tôi vốn đã làm cho các tipster trên Telegram. Vì vậy, chúng tôi áp nó lên hai site miễn phí khá nổi tiếng, Statarea và Zulubet, rồi bắt đầu đo đạc.
Bài viết này không phải là một kết luận. Nó là phương pháp, cộng với ngày dữ liệu đầu tiên, được công bố ngay để sau này không ai có thể nói rằng chúng tôi chỉ bắt đầu tính giờ khi con số trông có lợi.
Bước 5 là phần mà đa số dịch vụ "xác minh" bỏ qua, và cũng là phần quyết định liệu bất kỳ con số nào khác có ý nghĩa hay không.
| Statarea | Zulubet | |
|---|---|---|
| Public predictions read | 65 | 82 |
| Matched to a fixture we cover | 19 | 28 |
| Settled so far | 19 | 5 |
| Correct | 7 | 2 |
| Accuracy | 36.8% | 40.0% |
| Average odds on those picks | 2.10 | 2.21 |
| Break-even accuracy needed | 47.6% | 45.3% |
Cả hai đều thấp hơn mức độ chính xác mà họ cần ở mức giá các lựa chọn mang theo. Và cả hai con số đều vô nghĩa, vì 19 và 5 dự đoán đã đối soát là quá ít, chỉ là nhiễu. Chỉ một buổi tối tốt cũng có thể kéo chúng đi mười điểm. Chúng tôi vẫn công bố, vì phương án còn lại — im lặng chờ đến khi mẫu số có lợi cho ai đó — là cách ngành này tạo ra tiếng xấu của mình.
Hai cột sẽ quan trọng sau một tháng là hai cột cuối. Accuracy tự nó không bao giờ kết luận được gì: một site chỉ tip cửa trên odds thấp có thể đúng 70% thời gian mà vẫn lỗ tiền, điều này chúng tôi đã đo chi tiết trên một tipster AI phổ biến qua 25,890 trận. Điều quyết định là accuracy so với tỷ lệ hoà vốn ở mức odds bạn có thể lấy được, và xa hơn nữa là closing line value.
Trong 147 dự đoán đọc được ở ngày đầu, chúng tôi khớp được 47. Điều đó không phải là lỗi của họ hay của chúng tôi — các site này phủ nhiều giải đấu hơn rất nhiều so với 83 giải mà chúng tôi định giá. Một dự đoán ở giải mà chúng tôi không phủ không thể chấm điểm một cách trung thực, nên nó được tách ra và đếm riêng thay vì lặng lẽ bỏ qua hoặc, tệ hơn, tính như một lần thua.
Đây cũng là mô hình chúng tôi thấy khi audit các tipster Telegram: trong 46 kênh, chúng tôi đọc được 1,279 kèo công khai và đối soát được 567 kèo. Phần đo được luôn nhỏ hơn thành tích được quảng cáo, và bất kỳ audit nào không nói rõ kích thước mẫu đều đang yêu cầu người đọc tin thay vì kiểm tra.
Statarea đưa ra một tip. Zulubet công bố xác suất cho chủ, hoà và khách, rồi đánh dấu giá trị lớn nhất — điều này nhiều site miễn phí không làm được, và nó khiến site có thể được kiểm tra theo cách chặt hơn.
Một xác suất là một khẳng định có thể bác bỏ. Nếu một nhà dự báo nói 70% trong vài trăm lần, thì kết quả nên xảy ra khoảng 70% số lần. Nếu nó xảy ra 50% số lần, con số đó chỉ là trang trí. Hiện chúng tôi lưu mọi xác suất Zulubet công bố cùng với kết quả cuối cùng, để rồi theo thời gian trang đó có thể trả lời không chỉ "nó có tốt hơn closing line không" mà còn "các xác suất được nêu có được hiệu chỉnh đúng hay không" — cùng bài kiểm tra mà chúng tôi áp dụng cho mô hình của chính mình, mà, để ghi nhận, chúng tôi đã công bố sau khi nó tệ hơn thị trường.
Cả hai trang sẽ cập nhật khi dữ liệu đến và chưa đưa ra kết luận cho tới khi mỗi site có ít nhất 30 dự đoán đã đối soát:
Nếu các con số cuối cùng có lợi cho một trong hai site, chúng tôi sẽ nói thẳng. Chúng tôi đã công bố cả những tuần thua của mình, mô hình của chính mình được hiệu chỉnh tệ hơn thị trường, và một lỗi đo lường đã tạm thời thổi phồng closing line value của chính chúng tôi lên ba mươi điểm. Mục đích của việc đo công khai là kết quả không thuộc quyền chọn của chúng tôi.
Ghi chú phương pháp: dự đoán được đọc một lần mỗi ngày từ các trang công khai của site với user agent định danh; trang thô được lưu trữ riêng tư và không bao giờ tái bản. Khớp trận dùng chuẩn hoá tên đội với bảng bí danh; các kèo không khớp được đánh dấu là không thể xác minh và các kèo ở giải không được phủ nằm ngoài phạm vi — không cái nào bị tính là thua. Giá tại thời điểm phát hiện là mức giá soft-bookmaker tốt nhất chúng tôi giữ cho lựa chọn đó tại lúc đọc. Closing line value = giá tại thời điểm phát hiện ÷ sharp closing price − 1 trên cùng market. Chúng tôi không có liên kết, và cũng không có quan hệ thương mại, với bất kỳ site nào.