Ember란 무엇인가요?

Ember는 세 가지 독립적인 AI 모델(Claude(Anthropic), Grok(xAI), Gemini(Google))을 실제 Polymarket 시장에 매일 적용하는 실시간 AI 예측 실험입니다. 각 모델은 시장이 종료되기 전에 확률을 제시하며, 모든 예측은 기록되고 점수가 매겨지며 공개적으로 게시됩니다. 이 프로젝트는 고정된 규칙, 공개된 Brier 점수, 그리고 예측 후 수정이 전혀 없는 엄격한 365일 방법론에 따라 운영됩니다.

대상 사용자

• 트레이더: 모델 확률이 군중 심리와 분리될 때 실시간 AI 발산 알림을 원하는 분들, 이를 통해 잘못 평가된 시장을 찾는 데 도움을 줍니다.
• 개발자: JSON 형식의 세 가지 모델 확률 데이터를 제공하는 프로덕션 API가 필요하고, 웹훅이 로드맵에 있는 분들.
• 연구자: 고정된 방법론과 365일 전체 기간의 Brier 점수 예측 기록을 갖춘 공개적이고 재현 가능한 점수판을 중요시하는 분들.

주요 기능

세 가지 독립적인 AI 모델

Ember는 매일 동일한 시장 질문에 대해 Claude, Grok, Gemini를 실행합니다. 각 모델은 서로 다른 추론 방식을 사용합니다. Claude는 예측 시장과 예측가 커뮤니티를 종합하고, Grok은 실시간 X(트위터) 감정을 읽으며, Gemini는 검색 결과에 근거하여 예측을 내립니다. 모델 간 의견이 갈릴 때, 그 발산 자체가 신호가 됩니다.

공개 Brier 점수

모든 종료된 예측은 확률적 예측의 정확도를 측정하는 표준 지표인 Brier 점수로 평가됩니다. 점수판은 완전히 공개되며 매일 업데이트됩니다. 8일간 운영된 결과, Ember는 157개의 종료된 예측에서 군중 점수 0.0356 대비 0.0365의 Brier 점수를 기록했습니다.

고정된 방법론과 수정 투명성

예측은 작성된 후 절대 수정되지 않습니다. 인프라 문제가 데이터 무결성에 영향을 미칠 경우, Ember는 공개 수정 공지를 게시합니다(현재까지 9건). 방법론은 전체 365일 동안 고정되며, 300일차부터 2년차 평가가 시작됩니다.

실시간 발산 알림

모델의 확률이 군중 시장 가격과 크게 다를 때, Ember는 이를 높은 확신 신호로 표시합니다. 이러한 알림은 구독자에게 실시간으로 제공되며, 결과가 나오기 전에 잠재적인 잘못된 평가를 강조합니다.

차별화 포인트

세 가지 AI 모델이 매일 독립적으로 실시간 시장을 예측하고 결과를 내놓습니다. 수정은 없습니다. 모든 발산은 기록되고 점수가 매겨집니다.

Ember의 강점은 AI 예측에 대한 에 대한 헌신입니다. 블랙박스 예측 시스템과 달리, Ember는 전체 기록(인프라 문제에 대한 수정 공지 포함)을 공개하며 예측을 사후에 절대 변경하지 않습니다. 365일 실험은 모델이 시간이 지남에 따라 실적을 쌓도록 강제하여, AI가 실제로 자신의 궤적을 예측할 수 있는지 평가하는 데 Brier 점수를 의미 있게 만듭니다.