In Table 1, we observe that the model's prior response only agreed with the reference answer 34.7% on average. However, the RAG answers elevated the concordance to 94%. This result demonstrates that the RAG pipeline established in this work is highly effective at encouraging the model to adhere to its retrieved content. However, in the minority of cases where providing the retrieved content fails to correct the LLM, we find that the model simply responds with its original prior answer about 20% of the time.
Table 1에서, 모델의 이전 응답이 참조 답변과 평균 34.7%만 일치하는 것을 관찰할 수 있습니다. 그러나 RAG 답변은 일치율을 94%로 높였습니다. 이 결과는 본 연구에서 확립된 RAG 파이프라인이 모델이 검색된 콘텐츠를 따르도록 유도하는 데 매우 효과적임을 보여줍니다. 그러나 검색된 콘텐츠를 제공해도 LLM을 수정하지 못하는 소수의 경우에는, 모델이 약 20%의 확률로 원래의 이전 답변을 그대로 응답하는 것을 발견했습니다.
표 1에서 모델의 사전 응답이 참조 답변과 일치하는 비율은 평균 34.7%에 불과하다는 것을 알 수 있습니다. 그러나 RAG 답변은 일치도를 94%까지 높였습니다. 이 결과는 이 작업에서 수립한 RAG 파이프라인이 모델이 검색된 콘텐츠를 준수하도록 유도하는 데 매우 효과적이라는 것을 보여줍니다. 그러나 검색된 콘텐츠를 제공해도 LLM을 수정하지 못하는 소수의 경우, 모델이 단순히 원래의 사전 답변으로 응답하는 경우가 약 20%에 달했습니다.