Er gratis fotballspillsider nøyaktige? Vi begynte å måle dem, offentlig

Det finnes en hel kategori nettsteder som publiserer gratis fotballtips hver morgen: en kampoversikt, et tips, noen ganger en prosent ved siden av. De leses av mange. De sjekkes av nesten ingen, fordi det er tungvint å kontrollere — du måtte ha logget hva som ble tipset før avspark, ventet på resultatene, og visst hvilken pris du faktisk kunne ha tatt.

Det skjer tilfeldigvis allerede i infrastrukturen vår for tipsters på Telegram. Så vi rettet den mot to av de mer kjente gratis sidene, Statarea og Zulubet, og begynte å måle.

Denne artikkelen er ikke en dom. Den er metoden, pluss den første dagen med data, publisert nå slik at ingen senere kan anklage oss for å ha startet klokken først da tallene så gunstige ut.

Hva vi faktisk gjør, én gang om dagen

1. Leser de offentlige forutsigelsene én gang per dag. Én forespørsel per side, med en identifiserbar user agent og en kontaktlenke. Vi arkiverer den rå siden privat, slik at hvis sidens layout endrer seg og parseren vår ryker, kan vi se forskjellen mellom "de endret siden" og "de endret valgene sine".
2. Kobler hver forutsigelse til en faktisk kamp i databasen vår, ved å bruke den samme normaliseringen av lagnavn og alias-tabellen som vi bruker for tipsaudit.
3. Registrerer prisen i det øyeblikket vi leser den — den beste prisen som er tilgjengelig blant de myke bookmakerne vi følger for det utfallet. Ikke en pris vi fant på i etterkant.
4. Avregner mot det offisielle resultatet, og der vi har sharp closing price i samme marked, beregner closing line value: slo prisen på tipstidspunktet hvor markedet endte?
5. Publiserer nevnerne. Hvor mange forutsigelser vi leste, hvor mange vi kunne matche, hvor mange vi avregnet, og hvor mange som hadde en målbar closing line.

Steg 5 er delen de fleste "verifisering"-tjenester hopper over, og det er den delen som avgjør om noen av de andre tallene betyr noe.

Dag én

Begge ligger under treffprosenten de ville trenge til prisene valgene deres hadde. Og begge tallene er meningsløse, fordi 19 og 5 avregnede forutsigelser er støy. En eneste god kveld flytter dem med ti prosentpoeng. Vi trykker dem uansett, fordi alternativet — å vente stille til utvalget smigrer noen — er slik denne bransjen har fått sitt rykte.

De to kolonnene som vil bety noe om en måned, er de to siste. Treffprosent alene avgjør aldri noe: en side som bare tipper lave favoritter kan ha rett 70% av tiden og likevel tape penger, noe vi målte i detalj på en populær AI tipster over 25,890 kamper. Det som avgjør, er treffprosent mot break-even-raten til oddsen du kunne ha tatt, og i tillegg closing line value.

Hvorfor bare en tredjedel blir målt

Av 147 forutsigelser lest den første dagen, kunne vi matche 47. Det er ikke en feil hos dem eller oss — disse sidene dekker langt flere konkurranser enn de 83 ligaene vi priser. En forutsigelse på en liga vi ikke dekker kan ikke gis en ærlig vurdering, så den legges til side og telles separat i stedet for å bli stille droppet eller, verre, regnet som et tap.

Dette er det samme mønsteret vi fant da vi auditet Telegram-tipsters: på tvers av 46 kanaler leste vi 1,279 offentlige spill og kunne avregne 567 av dem. Den målbare delen er alltid mindre enn den annonserte historikken, og enhver audit som ikke forteller deg størrelsen, ber deg om å stole på den i stedet for å kontrollere den.

Zulubet publiserer sannsynligheter, som inviterer til en hardere test

Statarea publiserer et tips. Zulubet publiserer en sannsynlighet for hjemmeseier, uavgjort og borteseier, og markerer den største — noe som er mer enn de fleste gratis sider tilbyr, og det gjør siden mulig å kontrollere på en strengere måte.

En sannsynlighet er en falsifiserbar påstand. Hvis en prognosemaker sier 70% ved noen hundre anledninger, bør utfallet inntreffe omtrent 70% av gangene. Hvis det skjer 50% av gangene, er tallet pynt. Vi lagrer nå hver sannsynlighet Zulubet publiserer sammen med det endelige resultatet, slik at siden over tid kan svare ikke bare på "slår den closing line" men også "er de oppgitte sannsynlighetene i det hele tatt kalibrert" — den samme testen vi kjører på vår egen modell, som, for ordens skyld, vi publiserte etter at den kom ut dårligere enn markedet.

Hva som skjer videre

Begge sidene oppdateres etter hvert som dataene kommer inn, og vi holder igjen enhver konklusjon til minst 30 avregnede forutsigelser per side:

• Statarea, auditert mot closing line
• Zulubet, auditert mot closing line

Hvis tallene viser seg å være flatterende for en av sidene, sier vi det. Vi har publisert våre egne tapsuker, vår egen modell som var dårligere kalibrert enn markedet, og en målefeil som midlertidig blåste opp vår egen closing line value med tretti poeng. Poenget med å måle offentlig er at resultatet ikke er vårt å velge.

Metodenotater: forutsigelser leses én gang per dag fra sidens offentlige sider med en identifiserbar user agent; råsider arkiveres privat og publiseres aldri på nytt. Kampmatching bruker normalisering av lagnavn med en alias-tabell; umatchede spill markeres som ikke-verifiserbare og spill på konkurranser utenfor dekning er utenfor scope — ingen av delene regnes som et tap. Pris ved deteksjon er den beste soft-bookmaker-prisen vi holder for det utfallet på lesetidspunktet. Closing line value = pris ved deteksjon ÷ sharp closing price − 1 i samme marked. Vi har ingen tilknytning til, og ingen kommersiell relasjon til, noen av sidene.