Emberとは

Emberは、毎日実際のPolymarket市場に対して、Claude（Anthropic）、Grok（xAI）、Gemini（Google）という3つの独立したAIモデルを実行する、ライブAI予測実験です。各モデルは市場が決済される前に確率を提示し、すべての予測は記録、スコア化され、公開されます。このプロジェクトは、固定されたルール、公開されたBrierスコア、そして予測後の編集を一切行わないという、厳格な365日間の方法論に基づいて運営されています。

対象者

• トレーダー: モデルの確率が群衆のセンチメントから乖離した際に、リアルタイムのAI乖離アラートを必要とし、誤って価格設定された市場を見つけたい方。
• 開発者: 3モデルの確率データをJSON形式で提供するプロダクションAPIを必要とし、Webhookのロードマップを考慮している方。
• 研究者: 固定された方法論と、Brierスコアによる完全な365日間の予測アークを持つ、公開・再現可能なスコアボードを重視する方。

主な機能

3つの独立したAIモデル

Emberは、毎日同じ市場の質問に対してClaude、Grok、Geminiを実行します。各モデルは異なる推論アプローチを使用します。Claudeは予測市場と予測者コミュニティを統合し、GrokはライブのXセンチメントを読み取り、Geminiは検索結果に基づいて予測を裏付けます。モデル間で意見が分かれた場合、その乖離がシグナルとなります。

公開Brierスコアリング

決済されたすべての予測は、確率的予測の標準的な精度指標であるBrierスコアを使用してスコア化されます。スコアボードは完全に公開され、毎日更新されます。開始から8日間で、Emberは157件の決済済み予測に対して、群衆スコア0.0356に対し、Brierスコア0.0365を保持しています。

修正の透明性を伴う固定方法論

予測は作成後に編集されることは決してありません。インフラストラクチャの問題がデータの整合性に影響を与えた場合、Emberは公開修正通知を発行します（これまでに9件）。方法論は365日間の全期間にわたって固定され、300日目から2年目の評価が開始されます。

ライブ乖離アラート

モデルの確率が群衆の市場価格から大きく乖離した場合、Emberはそれを確信度の高いシグナルとしてフラグ付けします。これらのアラートは、購読者にリアルタイムで提供され、決済前に潜在的な誤った価格設定を浮き彫りにします。

特筆すべき点

3つのAIモデルが、毎日、独立して、結果が出る前にライブ市場を予測します。編集は一切なし。すべての乖離が記録され、スコア化されます。

Emberの強みは、AI予測における徹底的な透明性へのコミットメントです。ブラックボックスの予測システムとは異なり、Emberは完全な記録（インフラ問題に関する修正通知を含む）を公開し、予測を事後的に変更することは決してありません。365日間の実験により、モデルは時間をかけて実績を構築することを余儀なくされ、BrierスコアはAIが自身の軌道を実際に予測できるかどうかを評価する上で意味のあるものとなります。