無料のサッカー予想サイトは正確なのか？ 私たちはその測定を、公開で始めました

毎朝、無料のサッカー予想を公開するウェブサイトはひとつのカテゴリを成しています。試合一覧に、予想、時にはその横に確率が付く。多くの人が読みます。しかし検証する人はほとんどいません。検証は面倒だからです。キックオフ前に何が予想されたかを記録し、結果を待ち、実際に取れた価格を把握する必要があるからです。

それは、実はTelegram上のtipster向けに、当社のインフラがすでにやっていることです。そこで、それを有名な無料サイトの2つ、Statarea と Zulubet に当てて、計測を始めました。

この記事は判定ではありません。方法と、最初の1日分のデータです。あとから都合のいい数字が見えた時点で時計を回し始めた、と誰にも言われないよう、今公開します。

1日1回、実際にやっていること

1. 公開予想を1日1回読む。 サイトごとに1リクエスト、識別可能な user agent と連絡先リンク付きで取得します。サイトのレイアウトが変わってパーサーが壊れた場合に備え、元ページは非公開で保存します。そうすれば「ページが変わった」のか「予想が変わった」のかを区別できます。
2. 各予想を実在の試合に照合する。 tipster audit で使っているものと同じチーム名正規化と別名テーブルを使います。
3. 読み取った時点の価格を記録する。 その選択肢について追跡しているソフトブックメーカー全体で取れる最良価格です。後から作った価格ではありません。
4. 公式結果で精算し、 同じ市場で鋭い終値が取れる場合は closing line value を計算します。予想時点の価格は、市場の終値を上回っていたか。
5. 分母を公開する。 読んだ予想はいくつか、照合できたものはいくつか、精算できたものはいくつか、そして測定可能な closing line があったものはいくつか。

ステップ5は、多くの「検証」サービスが省く部分です。そして、他の数値に意味があるかどうかを決める部分でもあります。

1日目

どちらも、掲載されたオッズで必要な的中率を下回っています。ただし、どちらの数字も無意味です。 精算済みの予想が19件と5件では、ただのノイズです。良い夜が1回あれば、10ポイントは動きます。それでも載せているのは、そうしない代わりに――サンプルが誰かに都合よく見えるまで黙って待つやり方こそが、この業界の評判を作ってきたからです。

1か月後に意味を持つのは、最後の2列です。的中率だけでは何も決まりません。短いオッズの本命だけを狙うサイトは、70%当ててもなお負けることがあります。これは25,890試合にわたる人気AI tipsterで詳しく測定しました。決め手は、取れたオッズでの損益分岐率に対する的中率、さらにその先の closing line value です。

なぜ3分の1しか測れないのか

初日の147件の予想のうち、照合できたのは47件でした。これは彼らや私たちの失敗ではありません。これらのサイトは、当社が価格を付けている83リーグよりはるかに多くの大会を扱っているからです。当社がカバーしていないリーグの予想は、正直には採点できません。だから別扱いで保留し、黙って落としたり、ましてや負けとして数えたりはしません。

これはTelegram tipsterの監査でも同じでした。46チャンネルで1,279件の公開予想を読み、精算できたのは567件でした。測定可能な部分は、いつも広告される実績より小さい。サイズを言わない監査は、チェックされるより信じられることを求めています。

Zulubetは確率を出すので、より厳しいテストができる

Statarea は tip を出します。Zulubet は home、draw、away の確率を出し、最大値を強調表示します。これは多くの無料サイトより一歩進んでいて、より厳密に検証できます。

確率は反証可能な主張です。予測者が何百回かで70%と言うなら、結果もおおむね70%起きるべきです。50%しか起きないなら、その数字は装飾です。私たちは今後、Zulubet が公開するすべての確率を最終結果と並べて保存します。そうすれば、そのページはやがて「closing line を上回るか」だけでなく、「提示された確率はそもそも較正されているのか」にも答えられます。これは当社のモデルで行っているのと同じテストです。念のため言うと、そのモデルは市場より悪かったので、私たちはそれを公開しました。

次に起こること

両ページはデータ到着に応じて更新し、各サイト少なくとも30件の精算済み予想が集まるまで判定は保留します。

• Statarea, closing line との比較で監査
• Zulubet, closing line との比較で監査

どちらかに都合のいい数字が出たなら、そう言います。私たちは自分たちの負け週も、自分たちのモデルが市場より較正で劣っていたことも、ある計測バグで自社の closing line value が一時的に30ポイント膨らんだことも公開してきました。公開して計測する意味は、結果を選ぶ権利がこちらにないことです。

方法メモ: 予想は識別可能な user agent を付けてサイトの公開ページから1日1回読み取っています。元ページは非公開で保存し、再公開はしません。試合照合はチーム名正規化と別名テーブルを使います。照合不能な予想は検証不能として扱い、対象外の大会の予想は scope 外です。どちらも負けとしては数えません。検知時の価格は、その時点で保持している当該選択肢の最良ソフトブックメーカー価格です。closing line value = 検知時価格 ÷ 鋭い終値 − 1 を同一市場で計算します。どちらのサイトとも提携関係はなく、商業的関係もありません。