Large language models (LLMs) encapsulate a vast amount of factual information within their pre-trained weights, as evidenced by their ability to answer diverse questions across different domains. However, this knowledge is inherently limited, relying heavily on the characteristics of the training data. Consequently, using external datasets to incorporate new information or refine the capabilities of LLMs on previously seen information poses a significant challenge. In this study, we compare two common approaches: unsupervised fine-tuning and retrieval-augmented generation (RAG). We evaluate both approaches on a variety of knowledge-intensive tasks across different topics. Our findings reveal that while unsupervised fine-tuning offers some improvement, RAG consistently outperforms it, both for existing knowledge encountered during training and entirely new knowledge. Moreover, we find that LLMs struggle to learn new factual information through unsupervised fine-tuning, and that exposing them to numerous variations of the same fact during training could alleviate this problem.
대규모 언어 모델(LLMs)은 다양한 영역에 걸쳐 다양한 질문에 답할 수 있는 능력에서 알 수 있듯이 사전 학습된 가중치 내에 방대한 양의 사실 정보를 캡슐화합니다. 그러나 이러한 지식은 본질적으로 제한적이며 학습 데이터의 특성에 크게 의존합니다. 따라서 새로운 정보를 통합하거나 이전에 본 정보에 대한 LLM의 기능을 개선하기 위해 외부 데이터 세트를 사용하는 것은 상당한 어려움을 안고 있습니다. 이 연구에서는 비지도 Fine-tuning과 Retrieval-augmented generation (RAG)의 두 가지 일반적인 접근 방식을 비교합니다. 다양한 주제에 걸쳐 다양한 지식 집약적 작업에 대해 두 가지 접근 방식을 모두 평가합니다. 그 결과, 비지도 Fine-tuning이 어느 정도 개선 효과를 제공하지만, 학습 중에 접한 기존 지식과 완전히 새로운 지식 모두에서 RAG가 일관되게 더 우수한 성능을 발휘한다는 사실을 발견했습니다. 또한 LLM이 비지도 Fine-tuning을 통해 새로운 사실 정보를 학습하는 데 어려움을 겪고 있으며, 학습 중에 동일한 사실의 다양한 변형을 노출하면 이 문제를 완화할 수 있다는 사실도 발견했습니다.
대규모 언어 모델(LLM)은 다양한 영역에 걸쳐 다양한 질문에 답할 수 있는 능력에서 알 수 있듯이 사전 학습된 가중치 내에 방대한 양의 사실 정보를 캡슐화합니다. 그러나 이러한 지식은 본질적으로 제한적이며 학습 데이터의 특성에 크게 의존합니다. 따라서 새로운 정보를 통합하거나 이전에 본 정보에 대한 LLM의 기능을 개선하기 위해 외부 데이터 세트를 사용하는 것은 상당한 어려움을 안고 있습니다. 이 연구에서는 비지도 미세 조정과 검색 증강 생성(RAG)의 두 가지 일반적인 접근 방식을 비교합니다. 다양한 주제에 걸쳐 다양한 지식 집약적 작업에 대해 두 가지 접근 방식을 모두 평가합니다. 그 결과, 비지도 미세 조정이 어느 정도 개선 효과를 제공하지만, 학습 중에 접한 기존 지식과 완전히 새로운 지식 모두에서 RAG가 일관되게 더 우수한 성능을 발휘한다는 사실을 발견했습니다. 또한 LLM이 비지도 미세 조정을 통해 새로운 사실 정보를 학습하는 데 어려움을 겪고 있으며, 학습 중에 동일한 사실의 다양한 변형을 노출하면 이 문제를 완화할 수 있다는 사실도 발견했습니다.