Several factors might contribute to this behavior. Firstly, RAG not only adds knowledge to a model but also incorporates context relevant to the question, a feature lacking in fine-tuning. Additionally, fine-tuning may impact other capabilities of the model due to a degree of catastrophic forgetting. Finally, it's plausible that unsupervised fine-tuned models might benefit from further alignment through supervised or RL-based fine-tuning, as evidenced by the vastly improved performance of Orca2 over the base Llama2.
여러 가지 요인이 이러한 행동에 기여할 수 있습니다. 첫째, RAG는 모델에 지식을 추가할 뿐만 아니라 질문과 관련된 맥락을 통합하는데, 이는 Fine-tuning에는 없는 기능입니다. 또한 Fine-tuning은 치명적인 망각으로 인해 모델의 다른 기능에 영향을 미칠 수 있습니다. 마지막으로, 기본 Llama2보다 훨씬 향상된 성능에서 알 수 있듯이 비지도 Fine-tuned 모델은 지도 또는 RL 기반 Fine-tuning을 통해 추가 정렬을 통해 이점을 얻을 수 있습니다.
여러 가지 요인이 이러한 행동에 기여할 수 있습니다. 첫째, RAG는 모델에 지식을 추가할 뿐만 아니라 질문과 관련된 맥락을 통합하는데, 이는 미세 조정에는 없는 기능입니다. 또한 미세 조정은 치명적인 망각으로 인해 모델의 다른 기능에 영향을 미칠 수 있습니다. 마지막으로, 기본 라마2보다 훨씬 향상된 성능에서 알 수 있듯이 비지도 미세 조정 모델은 지도 또는 RL 기반 미세 조정을 통해 추가 정렬을 통해 이점을 얻을 수 있습니다.