Consider the supervised fine-tuning (SFT) setting for a Question-Answer dataset. The formulation consists of the Dataset (\(D\)) from which a set of Question (\(Q\)) and corresponding answer (\(A\)) pairs are derived or already available. In the classical SFT setting, the model is trained to improve its ability to answer the questions based on its knowledge - obtained either during pre-training, or during the SFT training phase. The model so trained can also be used at test-time with the Retrieval Augmented Generation (RAG) setting, where additional documents can be introduced in the prompt to help the model answer the question.
질문-답변 데이터 세트에 대한 Supervised Fine-tuning (SFT) 설정을 고려합니다. 이 공식은 질문(\(Q\)) 집합과 해당 답변(\(A\)) 쌍이 도출되거나 이미 사용 가능한 데이터 세트(\(D\))로 구성됩니다. 기존 SFT 설정에서는 모델이 사전 학습 또는 SFT 학습 단계에서 획득한 지식을 기반으로 질문에 답변하는 능력을 향상시키도록 학습합니다. 이렇게 학습된 모델은 질문에 답하는 데 도움이 되는 추가 문서를 프롬프트에 도입할 수 있는 Retrieval-augmented generation (RAG) 설정으로 테스트 시에도 사용할 수 있습니다.
질문-답변 데이터 세트에 대한 지도 미세 조정(SFT) 설정을 고려합니다. 이 공식은 질문(\(Q) 집합과 해당 답변(\(A) 쌍이 도출되거나 이미 사용 가능한 데이터 세트(\(D\)로 구성됩니다. 기존 SFT 설정에서는 모델이 사전 학습 또는 SFT 학습 단계에서 획득한 지식을 기반으로 질문에 답변하는 능력을 향상시키도록 학습합니다. 이렇게 학습된 모델은 질문에 답하는 데 도움이 되는 추가 문서를 프롬프트에 도입할 수 있는 검색 증강 생성(RAG) 설정으로 테스트 시에도 사용할 수 있습니다.