MMLU ResultsFor each task and model, we compared four approaches: using just the base model, RAG, FT, and finally combining FT and RAG by using the fine-tuned model as the generator. Furthermore, we tested the MMLU tasks using both 0-shot and 5-shot scenarios. The full results are shown in Table 1.
MMLU 결과 각 작업과 모델에 대해 기본 모델만 사용하는 경우, RAG, FT, 그리고 마지막으로 Fine-tuned 모델을 생성기로 사용하여 FT와 RAG를 결합하는 네 가지 접근 방식을 비교했습니다. 또한 zero-shot과 5-shot 시나리오를 모두 사용하여 MMLU 작업을 테스트했습니다. 전체 결과는 표 1에 나와 있습니다.
MMLU 결과각 작업과 모델에 대해 기본 모델만 사용하는 경우, RAG, FT, 그리고 마지막으로 미세 조정된 모델을 생성기로 사용하여 FT와 RAG를 결합하는 네 가지 접근 방식을 비교했습니다. 또한 0샷과 5샷 시나리오를 모두 사용하여 MMLU 작업을 테스트했습니다. 전체 결과는 표 1에 나와 있습니다.