This study aims to evaluate the knowledge injection capabilities of LLMs through a comparison of fine-tuning and RAG. To illustrate the rationale, let us use an analogy. Consider three college students taking a test on a specific topic. All had access to class materials but didn't know the topic beforehand. The first student had the textbook only during the test, the second had pre-test access and studied, and the third lost access upon the test announcement. Who would probably perform better?
이 연구는 Fine-tuning과 RAG의 비교를 통해 LLM의 지식 주입 기능을 평가하는 것을 목표로 합니다. 이를 설명하기 위해 비유를 사용하겠습니다. 특정 주제에 대한 시험을 치르는 세 명의 대학생을 생각해 보세요. 세 학생 모두 수업 자료에 접근할 수 있었지만 해당 주제에 대해 미리 알지 못했습니다. 첫 번째 학생은 시험 중에만 교과서를 사용했고, 두 번째 학생은 시험 전에 교과서를 미리 보고 공부했으며, 세 번째 학생은 시험 발표와 동시에 교과서를 사용할 수 없었습니다. 누가 더 잘할 수 있을까요?
이 연구는 미세 조정과 RAG의 비교를 통해 LLM의 지식 주입 기능을 평가하는 것을 목표로 합니다. 이를 설명하기 위해 비유를 사용하겠습니다. 특정 주제에 대한 시험을 치르는 세 명의 대학생을 생각해 보세요. 세 학생 모두 수업 자료에 접근할 수 있었지만 해당 주제에 대해 미리 알지 못했습니다. 첫 번째 학생은 시험 중에만 교과서를 사용했고, 두 번째 학생은 시험 전에 교과서를 미리 보고 공부했으며, 세 번째 학생은 시험 발표와 동시에 교과서를 사용할 수 없었습니다. 누가 더 잘할 수 있을까요?