When it comes to adapting LLMs to specialized domains, we consider the following two candidates: in-context learning through Retrieval-Augmented Generation (RAG) and supervised fine-tuning. RAG-based methods allow the LLM to reference the documents when answering questions. However, these methods fail to leverage the learning opportunity afforded by the fixed domain setting and early access to the test documents. Alternatively, supervised fine-tuning offers the opportunity to learn more general patterns in the documents and better align to end tasks and user preferences (Zhou et al., 2023). However, existing fine-tuning based approaches either fail to leverage the documents at test time (don't incorporate RAG) or fail to account for the imperfections in the retrieval process during training.
특수 도메인에 LLM을 적용하는 경우, In-Context Learning을 통한 Retrieval-Augmented Generation (RAG)과 Supervised Fine-tuning의 두 가지 후보를 고려합니다. RAG 기반 방법을 사용하면 LLM이 질문에 답할 때 문서를 참조할 수 있습니다. 그러나 이러한 방법은 고정된 도메인 설정과 테스트 문서에 대한 조기 액세스를 통해 제공되는 학습 기회를 활용하지 못합니다. 반면, Supervised Fine-tuning은 문서의 보다 일반적인 패턴을 학습하고 최종 작업 및 사용자 선호도에 더 잘 맞출 수 있는 기회를 제공합니다(Zhou et al., 2023). 그러나 기존의 Fine-tuning 기반 접근 방식은 테스트 시점에 문서를 활용하지 못하거나(RAG를 통합하지 않음) 훈련 중 검색 프로세스의 불완전성을 설명하지 못합니다.
특수 도메인에 LLM을 적용하는 경우, 검색 증강 생성(RAG)을 통한 컨텍스트 내 학습과 지도 미세 조정의 두 가지 후보를 고려합니다. RAG 기반 방법을 사용하면 LLM이 질문에 답할 때 문서를 참조할 수 있습니다. 그러나 이러한 방법은 고정된 도메인 설정과 테스트 문서에 대한 조기 액세스를 통해 제공되는 학습 기회를 활용하지 못합니다. 반면, 지도 미세 조정은 문서의 보다 일반적인 패턴을 학습하고 최종 작업 및 사용자 선호도에 더 잘 맞출 수 있는 기회를 제공합니다(Zhou et al., 2023). 그러나 기존의 미세 조정 기반 접근 방식은 테스트 시점에 문서를 활용하지 못하거나(RAG를 통합하지 않음) 훈련 중 검색 프로세스의 불완전성을 설명하지 못합니다.