We also consider the degree of deviation between the model's prior response and the value contained in the retrieved context (Figure 2, right side plots). A similar pattern emerges in this analysis: as the RAG value diverges from the model's prior, the model is less likely to adopt the RAG value over its own initial response. We additionally plot data split into the upper and lower half percentiles and observe that, across all six datasets, the lower probability prior responses are monotonically lower than the higher probability response tokens. Thus, the correlation between deviation and RAG response rate holds across both bands of probabilities.
모델의 이전 응답과 검색된 컨텍스트에 포함된 값 간의 편차 정도도 고려합니다(Figure 2, 오른쪽 그래프). 이 분석에서도 유사한 패턴이 나타납니다: RAG 값이 모델의 이전 응답과 다를수록, 모델은 자신의 초기 응답보다 RAG 값을 채택할 가능성이 낮아집니다. 추가로 데이터를 상위 및 하위 절반 백분위수로 나누어 그래프로 나타내었으며, 모든 여섯 개의 데이터셋에서 하위 확률의 이전 응답이 상위 확률 응답 토큰보다 일관되게 낮다는 것을 관찰했습니다. 따라서 편차와 RAG 응답률 간의 상관관계는 두 확률 밴드 모두에서 유지됩니다.
또한 모델의 사전 응답과 검색된 컨텍스트에 포함된 값 사이의 편차 정도도 고려합니다(그림 2, 오른쪽 플롯). 이 분석에서도 유사한 패턴이 나타납니다. RAG 값이 모델의 사전 값에서 벗어날수록 모델은 자신의 초기 응답보다 RAG 값을 채택할 가능성이 낮아집니다. 또한 상위 및 하위 반분위수로 데이터를 분할하여 플롯하고 6개의 데이터 세트 모두에서 하위 확률의 사전 응답 토큰이 상위 확률의 응답 토큰보다 단조롭게 낮다는 것을 관찰합니다. 따라서 편차와 RAG 응답률 사이의 상관관계는 두 확률 밴드 모두에서 유지됩니다.