To address our RQs, we performed a comprehensive comparison of RAG and fine tuning methods, with specific attention to less popular knowledge. Our evaluation setup explores various factors, including model size, retrieval models, the quality of synthetic data generation, and the fine-tuning method (PEFT vs. full fine tuning).
RQ를 해결하기 위해 우리는 덜 대중적인 지식에 특별한 주의를 기울여 RAG와 Fine-tuning 방법을 포괄적으로 비교했습니다. 평가 설정은 모델 크기, 검색 모델, 합성 데이터 생성의 품질, Fine-tuning 방법(PEFT 대 전체 Fine-tuning) 등 다양한 요소를 탐색합니다.
RQ를 해결하기 위해 우리는 덜 대중적인 지식에 특별한 주의를 기울여 RAG와 미세 조정 방법을 포괄적으로 비교했습니다. 평가 설정은 모델 크기, 검색 모델, 합성 데이터 생성의 품질, 미세 조정 방법(PEFT 대 전체 미세 조정) 등 다양한 요소를 탐색합니다.