Specifically, for questions where the LLM's response is incorrect, we annotate them with a special token, \(\langle\text{RET}\rangle\), indicating the need for additional context. Subsequently, we utilize these annotations to construct a new dataset tailored for training purposes, where we teach an LLM to answer directly if it is confident about the answer or to require context it believes is useful for answering the question (see Figure 1). Our hypothesis is that through this training process, the LLM learns to use an IR system when it needs extra context to answera question, thus we name it Adapt-LLM.
특히, LLM의 응답이 틀린 질문에 대해서는 추가적인 맥락이 필요함을 나타내는 특수 토큰 \(\langle\text{RET}\rangle\)으로 주석을 달았습니다. 이후, 이러한 주석을 활용하여 훈련 목적에 맞춘 새로운 데이터셋을 구성합니다. 여기서 우리는 LLM이 답변에 자신이 있을 때는 직접 답변하도록 하고, 질문에 답하기 위해 유용하다고 생각하는 맥락이 필요할 때는 이를 요구하도록 가르칩니다(그림 1 참조). 우리의 가설은 이 훈련 과정을 통해 LLM이 질문에 답하기 위해 추가적인 맥락이 필요할 때 IR 시스템을 사용하는 법을 배우게 된다는 것이며, 따라서 이를 Adapt-LLM이라고 명명했습니다.
구체적으로, LLM의 응답이 잘못된 질문에 대해서는 추가 컨텍스트가 필요함을 나타내는 특수 토큰(\(\langle\text{RET}\rangle\))으로 주석을 달습니다. 그런 다음 이러한 주석을 활용하여 훈련용으로 맞춤화된 새 데이터 세트를 구성합니다. 이 데이터 세트에서는 LLM이 답변에 대해 확신이 있으면 직접 답변하거나 질문에 답하는 데 유용하다고 생각되는 컨텍스트를 요구하도록 가르칩니다(그림 1 참조). 이 훈련 과정을 통해 LLM이 질문에 답하기 위해 추가 컨텍스트가 필요할 때 IR 시스템을 사용하는 방법을 학습한다는 가설을 세우고, 이를 Adapt-LLM이라고 명명했습니다.