Có một kiểu tipster đã học cách nói nghe rất khoa học. Họ nói về một "AI engine", "thousands of data points", "machine learning models" và một đội "data scientists with PhDs". Và — phải ghi nhận — một số người trong đó công khai toàn bộ record, mọi dự đoán đều được log lại dù thắng hay thua, có thể tải xuống như một tệp duy nhất.
Chúng tôi đã lấy lời họ làm thật với một trong những bên lớn hơn, tải bộ dữ liệu công khai của họ xuống và phân tích 25,890 trận trong một năm. Đây là những gì con số cho thấy — tất cả đều là của họ, không phải của chúng tôi.
Điều đầu tiên cần kiểm tra với bất kỳ mô hình nào là nó có làm được điều gì mà một mức giá miễn phí chưa làm sẵn hay không. Vì vậy, với mỗi trận, chúng tôi so sánh lựa chọn của tipster với baseline đơn giản nhất có thể: cửa được nhà cái đánh giá cao nhất — đội có tỷ lệ thấp nhất.
Chúng trùng nhau 83% thời gian.
Nói cách khác, bốn lần trong năm, "AI engine" chỉ đơn giản chọn đội mà nhà cái đã xếp làm cửa trên. Đó không phải là mô hình tìm ra value ẩn. Đó là đọc tỷ lệ và chép lại.
Còn hơn thế nữa. Mỗi lựa chọn đi kèm một điểm "trust" hoặc "confidence", được trình bày như đầu ra của thuật toán. Chúng tôi đối chiếu nó với xác suất hàm ý từ odds — và chúng bám nhau gần như hoàn hảo (tương quan 0.61, tăng cao hơn ở các lựa chọn tự tin). "Confidence score" về cơ bản chỉ là mức giá của nhà cái mặc áo blouse phòng thí nghiệm.
Đây là con số mà marketing của họ luôn đưa lên đầu: ở các lựa chọn có độ tin cậy cao nhất, họ đúng khoảng 73% thời gian. Nghe rất tốt. Nhưng nó cũng vô nghĩa, và đây là lý do chính xác.
Những lựa chọn confidence cao đó đều là cửa trên nặng với mức giá trung bình 1.40. Hãy làm phép tính mà một bettor thực sự quan tâm: thắng 73% kèo ở odds 1.40 thì bạn thu về 0.73 × 1.40 = 1.02 cho mỗi 1.00 vốn cược — trước khi biên lợi nhuận của nhà cái ăn nốt phần còn lại. Kết quả là lợi nhuận khoảng −0.1%. Bạn thắng gần như mọi kèo nhưng vẫn từ từ cháy tài khoản.
Tính trên toàn bộ 25,890 lựa chọn đã công bố, nếu backing tất cả ở mức odds hiển thị thì lợi nhuận là −5.6%. Không phải trên mô hình của chúng tôi. Trên của họ.
Bài kiểm tra nói lên nhiều nhất là 17% số trận mà lựa chọn của tipster khác với cửa trên của nhà cái — nơi duy nhất một mô hình thật sự có thể cho thấy edge. Nếu thuật toán biết điều gì đó mà thị trường không biết, đây là nơi nó xứng đáng với phí thuê bao.
Nhưng không. Ở những trận đó, các lựa chọn chỉ đúng 28.7% thời gian và cho kết quả −9.95%. Blindly backing cửa trên còn lỗ ít hơn. "Intelligence" ở đây là trừ value chứ không phải cộng.
Chúng tôi không nêu tên dịch vụ đó. Vấn đề không phải một công ty — mà là cả định dạng này. "67% accuracy", "AI-powered", "verified results": không con số nào trong số đó có nghĩa như nó khiến bạn cảm thấy, vì độ chính xác ở odds thấp không đồng nghĩa với profit, và một mô hình chỉ chép cửa trên thì không phải là mô hình.
Đây cũng là tấm gương mà chúng tôi sẵn sàng đưa về phía mình. Đó là lý do TipsAudit không bán một con số accuracy. Chúng tôi công bố fair price sau khi đã loại bỏ biên của nhà cái, chỉ gắn value khi một nhà cái kém hơn thực sự định giá sai một trận, và con số tiêu đề trên track record của chúng tôi là CLV — chỉ số thực sự tương quan với edge dài hạn — được hiển thị trên mọi pick, trước giờ bóng lăn, kể cả các kèo thua.
Sự thật khó chịu trong dữ liệu trên là bạn hoàn toàn có thể tự audit tipster đó. Tệp dữ liệu đã công khai từ đầu. Phần lớn mọi người không bao giờ mở nó ra, vì một bức tường ảnh chụp màn hình màu xanh trông thuyết phục hơn một bảng tính. Chúng tôi nghĩ nên làm ngược lại.
Dữ liệu: một bộ dữ liệu kết quả tipster công khai, 25,890 trận với odds và kết quả từ một mùa giải, được phân tích theo mức độ trùng giữa pick và cửa trên, độ chính xác theo từng band confidence, và lợi nhuận trên vốn ở odds hiển thị. Không có gì ở đây là lời khuyên cược; betting có rủi ro tài chính thực. 18+, chơi có trách nhiệm.