Since LMs are limited by their context window, we summarize the articles. In particular, we prompt GPT-3.5-Turbo to distill the most relevant details from each article with respect to the forecasting question (Figure 13). Finally, we present the top \(k\) article summaries to the LM, ordered by their relevancy. We choose the ranking criterion, article count \(k\), and summarization prompt based on end-to-end Brier scores over the validation set; see Section 5.2 for the hyperparameter sweep procedure.
LM은 context window에 의해 제한되므로 문서를 요약합니다. 특히, 예측 질문과 관련하여 각 문서에서 가장 관련성이 높은 세부 사항을 추출하도록 GPT-3.5-Turbo에 prompt합니다(그림 13). 마지막으로, 관련성 순으로 정렬된 상위 \(k\) 기사 요약을 LM에 제시합니다. 순위 결정 기준, 기사 수 \(k\), 요약 prompt는 유효성 검사 세트에 대한 end-to-end Brier scores를 기반으로 선택하며, 하이퍼파라미터 스윕 절차는 섹션 5.2를 참조하세요.
LM은 컨텍스트 창에 의해 제한되므로 문서를 요약합니다. 특히, 예측 질문과 관련하여 각 문서에서 가장 관련성이 높은 세부 사항을 추출하도록 GPT-3.5-Turbo에 프롬프트합니다(그림 13). 마지막으로, 관련성 순으로 정렬된 상위 \(k\) 기사 요약을 LM에 제시합니다. 순위 결정 기준, 기사 수 \(k\), 요약 프롬프트는 유효성 검사 세트에 대한 엔드투엔드 브리어 점수를 기반으로 선택하며, 하이퍼파라미터 스윕 절차는 섹션 5.2를 참조하세요.