「直感にだまされる」で紹介した「この複雑な世界を生き抜くための思考術 自分の直感にだまされないための8つのルール」(著者:キコ・リャネラス 発行所:青土社)の中に予測プラットフォーム「メタキュラス(Metaculus)」が紹介されています。「メタキュラス」は、ロシアのウクライナ侵攻やコロナウィルスのパンデミック、オミクロン株からデルタ株への変移、オミクロン株の性質などの予測を専門家よりも早く予測した実績を有しています。メタキュラスの予測精度は、確率予測の正確性を測る統計指標「ブライア・スコア(Brier Score)」で厳密に管理されていて、メタキュラス全体のデータ(Track Record)によると、完全にランダムな予測(スコア0.25)や一般的な専門家の予測を大きく上回る高い精度(0.1台など)を維持していることが実証されています。単にコミュニティ全員の予測を平均するのではなく、過去に精度の高い予測を出し続けてきた実績のあるユーザー(独自の評価を受けたトップ予測者)の意見に高いウェイトを置くアルゴリズムを採用しています。これにより、知識のない集団によるノイズが排除されています。最近は、AI(大規模言語モデル)の予測能力を測るベンチマークツール「FutureEval」を立ち上げるなど、最先端のデータ分析と人間の直感を組み合わせることで、さらに精度の向上を図っているようです。メタキュラスは原則として金銭を賭けず「予測の正確さと評判(トラックレコード)」を競っています。これにより、クジラ(大口投資家)による意図的な価格操作や、感情的な賭けが発生しにくく、純粋に「予測の正しさ」を追求する構造になっているそうです。
メタキュラスのサイト → https://www.metaculus.com/