We find that these relationships hold under analysis on six different domain datasets across over 1200 questions. We also find that the choice of prompting technique (e.g. strictly adhere, loosely adhere) can influence both the baseline and strength of this relationship. These results highlight the inherent tension in LLMs between the model's pre-trained knowledge and the retrieved content provided in context.
1200개 이상의 질문에 걸쳐 6개의 서로 다른 도메인 데이터 세트에 대한 분석에서 이러한 관계가 유지됨을 확인했습니다. 또한 prompting 기법(예: 엄격하게 준수, 느슨하게 준수)의 선택이 baseline과 이 관계의 강도에 영향을 미칠 수 있음을 발견했습니다. 이러한 결과는 LLMs의 모델이 사전 학습된 지식과 컨텍스트에서 제공된 검색된 콘텐츠 사이의 내재적 긴장을 강조합니다.
1200개 이상의 질문에 걸쳐 6개의 서로 다른 도메인 데이터 세트에 대한 분석에서 이러한 관계가 유지됨을 확인했습니다. 또한 프롬프트 기법(예: 엄격하게 준수, 느슨하게 준수)의 선택이 기본값과 이 관계의 강도에 영향을 미칠 수 있음을 발견했습니다. 이러한 결과는 모델이 사전 학습된 지식과 컨텍스트에서 제공된 검색된 콘텐츠 사이의 내재적 긴장을 강조합니다.