In RAFT, we train the model to answer the question (Q) from Document(s) (D*) to generate an answer (A*), where A* includes chain-of-thought (Wei et al., 2022; Anthropic, 2023), and in the presence of distractor documents (\(D_{k}\)). We explain the methodology in detail in Section 3 and analyze the sensitivity to the number of distractor documents (\(k\)) at train- and test- time in Section 5. RAFT consistently outperforms Supervised-finetuning both with- and without- RAG across PubMed (Dernoncourt and Lee, 2017), HotpotQA (Yang et al., 2018), and HuggingFace Hub, Torch Hub, and Tensorflow Hub Gorilla datasets (Patil et al., 2023), presenting a novel, yet simple technique to improve pre-trained LLMs for in-domain RAG.
RAFT에서는 문서(D*)의 질문(Q)에 답하여 답변(A*)을 생성하도록 모델을 훈련하는데, 여기서 A*에는 chain-of-thought(Wei et al., 2022; Anthropic, 2023)이 포함되며, distractor 문서(\(D_{k}\))가 있는 경우에도 마찬가지입니다. 섹션 3에서 방법론을 자세히 설명하고 섹션 5에서 훈련 및 테스트 시 distractor 문서 수(\(k\))에 대한 민감도를 분석합니다. RAFT는 PubMed(Dernoncourt and Lee, 2017), HotpotQA(Yang et al., 2018), HuggingFace Hub, Torch Hub 및 Tensorflow Hub Gorilla 데이터 세트(Patil et al., 2023)에서 RAG를 사용하거나 사용하지 않은 Supervised Fine-tuning보다 일관되게 우수한 성능을 발휘하며, 도메인 내 RAG를 위해 사전 학습된 LLM을 개선하는 새롭고 간단한 기술을 제시합니다.
RAFT에서는 문서(D*)의 질문(Q)에 답하여 답변(A*)을 생성하도록 모델을 훈련하는데, 여기서 A*에는 생각의 사슬(Wei et al., 2022; Anthropic, 2023)이 포함되며, 산만한 문서(\(D_{k}\))가 있는 경우에도 마찬가지입니다. 섹션 3에서 방법론을 자세히 설명하고 섹션 5에서 훈련 및 테스트 시 산만한 문서 수(\(k\))에 대한 민감도를 분석합니다. RAFT는 PubMed(Dernoncourt and Lee, 2017), HotpotQA(Yang et al., 2018), HuggingFace Hub, Torch Hub 및 Tensorflow Hub Gorilla 데이터 세트(Patil et al., 2023)에서 RAG를 사용하거나 사용하지 않은 슈퍼바이저 미세 조정보다 일관되게 우수한 성능을 발휘하며, 도메인 내 RAG를 위해 사전 학습된 LLM을 개선하는 새롭고 간단한 기술을 제시합니다.