It is worth noting that although the questions are based on information the models were not exposed to during training, the results of the base models surpass \(\frac{1}{L}=0.25\). This can partially be explained by the models using reasoning and/or pre-existing knowledge when answering questions that are not independent of the past information. Some examples of this can be found in Appendix C.
주목할 점은 질문들이 모델이 훈련 중에 노출되지 않은 정보에 기반하고 있음에도 불구하고, 기본 모델의 결과가 \(\frac{1}{L}=0.25\)를 초과한다는 것입니다. 이는 모델이 과거 정보와 독립적이지 않은 질문에 답할 때 추론 및/또는 기존 지식을 사용하기 때문일 수 있습니다. 이에 대한 몇 가지 예는 부록 C에서 찾을 수 있습니다.
질문은 모델이 학습하는 동안 노출되지 않은 정보를 기반으로 하지만, 기본 모델의 결과가 \(\frac{1}{L}=0.25\)를 초과한다는 점에 주목할 필요가 있다. 이는 부분적으로 모델이 과거 정보와 독립적이지 않은 질문에 답할 때 추론 및/또는 기존 지식을 사용하기 때문일 수 있습니다. 이에 대한 몇 가지 예는 부록 C에서 확인할 수 있습니다.