\end{table}
Table 2: **(a) Distribution of our train, validation, and test sets across all 5 forecasting platforms.** Importantly, every question in the test set is from June 1, 2023 or later, after the training cut-off of our base LMs. Meanwhile, all questions in the train and validation sets were resolved before June 1, 2023, ensuring no leakage from the tuning process. **(b) Baseline performance** of pre-trained models on the test set, with 1 standard error (SE) (see full results in Table 7). Random baseline: 0.250; human crowd: 0.149. The results underscore that models are not naturally good at forecasting.
\end{table}
표 2: **(a) 5개의 예측 플랫폼 모두에서 train, validation 및 test 세트의 분포.** 중요한 것은 test 세트의 모든 문제가 기본 LMs의 학습 마감일인 2023년 6월 1일 이후에 출제된 것입니다. 반면, train 및 validation 세트의 모든 문제는 2023년 6월 1일 이전에 해결되었으므로 tuning 프로세스에서 누출되지 않았습니다. **(b) test 세트에서 사전 학습된 모델의 **baseline 성능**이며, 표준 오차(SE) 1개(전체 결과는 표 7 참조)입니다. 무작위 baseline: 0.250; 인간 크라우드: 0.149. 이 결과는 모델이 자연스럽게 예측에 능숙하지 않다는 것을 강조합니다.
\end{table}
표 2: **(a) 5개의 예측 플랫폼 모두에서 트레인, 유효성 검사 및 테스트 세트의 분포.** 중요한 것은 테스트 세트의 모든 문제가 기본 LM의 학습 마감일인 2023년 6월 1일 이후에 출제된 것입니다. 반면, 트레인 및 유효성 검사 세트의 모든 문제는 2023년 6월 1일 이전에 해결되었으므로 튜닝 프로세스에서 누출되지 않았습니다. **(b) 테스트 세트에서 사전 학습된 모델의 **기준 성능**이며, 표준 오차(SE) 1개(전체 결과는 표 7 참조)입니다. 무작위 기준선: 0.250; 인간 크라우드: 0.149. 이 결과는 모델이 자연스럽게 예측에 능숙하지 않다는 것을 강조합니다.