We can draw an analogy to an open-book exam. Existing in-context retrieval methods are equivalent to taking an open-book exam without studying. Alternatively, existing fine-tuning based approaches implement "studying" by either directly "memorizing" (Xiong et al., 2023) the input documents or answering practice questions (Wang et al., 2022) without referencing the documents. While these approaches leverage in-domain learning they fail to prepare for the open-book nature of test setting.
우리는 공책 시험에 비유할 수 있습니다. 기존의 In-Context Retrieval 방법은 공책 시험을 공부하지 않고 치르는 것과 같습니다. 또는 기존의 Fine-tuning 기반 접근 방식은 입력 문서를 직접 "암기"하거나(Xiong et al., 2023) 문서를 참조하지 않고 연습 문제에 답함으로써 "공부"를 구현합니다(Wang et al., 2022). 이러한 접근 방식은 도메인 내 학습을 활용하지만 시험 환경의 오픈 북 특성에 대비하지 못합니다.
우리는 공책 시험에 비유할 수 있습니다. 기존의 문맥 내 검색 방법은 공책 시험을 공부하지 않고 치르는 것과 같습니다. 또는 기존의 미세 조정 기반 접근 방식은 입력 문서를 직접 "암기"하거나(Xiong et al., 2023) 문서를 참조하지 않고 연습 문제에 답함으로써 "공부"를 구현합니다(Wang et al., 2022). 이러한 접근 방식은 도메인 내 학습을 활용하지만 시험 환경의 오픈 북 특성에 대비하지 못합니다.