Figure 1: The inference process of Adapt-LLM step-by-step: given a question (step 1), an LLM decides (step 2) whether to answer the question directly (step 3) or to ask for additional contextual information, generating the special \(\langle\)RET\(\rangle\) token; for the later, an off-the-shelf IR system is used to retrieve relevant context (step 4), which is used alongside the question to prompt again the LLM for the final answer (step 5).
Figure 1: Adapt-LLM의 추론 과정 단계별 설명: 질문이 주어지면 (1단계), LLM은 질문에 직접 답할지 (3단계) 아니면 추가적인 맥락 정보를 요청할지 결정합니다 (2단계). 후자의 경우, 특수한 \(\langle\)RET\(\rangle\) 토큰을 생성합니다. 이후, 관련된 맥락을 검색하기 위해 기존의 IR 시스템을 사용하며 (4단계), 이 맥락은 질문과 함께 최종 답변을 위해 LLM을 다시 프롬프트하는 데 사용됩니다 (5단계).
그림 1: 질문이 주어지면(1단계), LLM이 질문에 직접 답할지(3단계) 아니면 추가적인 컨텍스트 정보를 요청하여 특수(\(RET\(\rangle\) 토큰을 생성하는지 결정합니다(2단계); 후자의 경우, 기성 IR 시스템을 사용하여 관련 컨텍스트를 검색합니다(4단계), 이 컨텍스트는 질문과 함께 사용되어 최종 답변을 위해 다시 LLM에 프롬프트합니다(5단계).