Empirical results on six tasks, including reasoning and long-form generation, demonstrate that Self-Rag significantly outperforms pre-trained and instruction-tuned LLMs that have more parameters and widely adopted RAG approaches with higher citation accuracy. In particular, Self-Rag outperforms retrieval-augmented ChatGPT on four tasks, Llama2-chat (Touvron et al., 2023) and Alpaca (Dubois et al., 2023) on all tasks. Our analysis demonstrates the effectiveness of training and inference with reflection tokens for overall performance improvements as well as test-time model customizations (e.g., balancing the trade-off between citation previsions and completeness).
추론 및 장문 생성을 포함한 6가지 작업에 대한 실증 결과를 통해 Self-Rag가 더 많은 파라미터를 가진 pre-trained 및 Instruction-tuned LLM과 인용 정확도가 높은 광범위하게 채택된 RAG 접근 방식보다 훨씬 뛰어난 성능을 발휘한다는 것을 입증했습니다. 특히, Self-Rag은 4가지 작업에서 Retrieval-augmented ChatGPT, 모든 작업에서 Llama2-chat(Touvron et al., 2023) 및 Alpaca(Dubois et al., 2023)보다 우수한 성능을 보였습니다. 분석 결과, 성능 향상과 테스트 시간 모델 사용자 지정(예: 인용 제공과 완전성 간의 균형 조정)을 위한 반영 토큰을 사용한 훈련 및 추론의 효과를 입증했습니다.
추론 및 장문 생성을 포함한 6가지 작업에 대한 실증 결과를 통해 Self-Rag가 더 많은 파라미터를 가진 사전 학습 및 지시 튜닝된 LLM과 인용 정확도가 높은 광범위하게 채택된 RAG 접근 방식보다 훨씬 뛰어난 성능을 발휘한다는 것을 입증했습니다. 특히, Self-Rag은 4가지 작업에서 검색 증강 ChatGPT, 모든 작업에서 Llama2-chat(Touvron et al., 2023) 및 Alpaca(Dubois et al., 2023)보다 우수한 성능을 보였습니다. 분석 결과, 성능 향상과 테스트 시간 모델 사용자 지정(예: 인용 제공과 완전성 간의 균형 조정)을 위한 반영 토큰을 사용한 훈련 및 추론의 효과를 입증했습니다.