**Metric.** Our work focuses on binary questions and uses the Brier score as the performance metric, defined as \((f-o)^{2}\), where \(f\in[0,1]\) is the probabilistic forecast and \(o\in\{0,1\}\) is the outcome. The Brier score is a strictly proper scoring rule: assuming the true probability that \(o=1\) is \(p\), the optimal strategy is to report \(f=p\). This is desirable, since improper scoring rules would incentivize reporting distorted probabilities. As a baseline, an (unskilled) forecast of.5 attains a Brier score of.25.
**Metric.** 우리의 작업은 이진 질문에 초점을 맞추고 있으며, 성능 metric으로 Brier score를 사용하며, 여기서 \(f\in[0,1]\)은 확률 예측이고 \(o\in\{0,1\}\)은 결과로 정의됩니다. Brier score는 엄격하게 적절한 채점 규칙입니다. \(o=1\)이 될 진정한 확률이 \(p\)라고 가정하면, 최적의 전략은 \(f=p\)를 보고하는 것입니다. 부적절한 채점 규칙은 왜곡된 확률을 보고하도록 인센티브를 제공할 수 있으므로 이는 바람직합니다. 기준선으로서 (무숙련) 예측의.5는.25의 Brier score를 달성합니다.
**메트릭.** 우리의 작업은 이진 질문에 초점을 맞추고 있으며, 성능 메트릭으로 브라이어 점수를 사용하며, 여기서 \(f\in[0,1]\)은 확률 예측이고 \(o\in\{0,1\}\)은 결과로 정의됩니다. 브라이어 점수는 엄격하게 적절한 채점 규칙입니다. o=1$이 될 진정한 확률이 $p$라고 가정하면, 최적의 전략은 $f=p$를 보고하는 것입니다. 부적절한 채점 규칙은 왜곡된 확률을 보고하도록 인센티브를 제공할 수 있으므로 이는 바람직합니다. 기준선으로서 (무숙련) 예측의.5는.25의 브라이어 점수를 달성합니다.