Standard instruction-tuning is inferior not due to forgettingA drawback of standard instruction-tuning is that knowledge in test documents might be forgotten after training on QA pairs (a phenomenon also known as the "alignment tax" (Ouyang et al., 2022)). To show that the lower performance of standard instruction-tuning is not due to forgetting, we add a setting where we mix train QA with test documents during instruction-tuning to prevent forgetting (Fig. 4 ). As shown in Tab. 2, this does not help, confirming our hypothesis.
표준 Instruction Tuning은 잊어버림으로 인해 열등하지 않습니다. 표준 Instruction Tuning의 단점은 QA 쌍에 대한 훈련 후 테스트 문서의 지식이 잊혀질 수 있다는 것입니다(이 현상을 "alignment tax"(Ouyang et al., 2022)라고도 합니다). 표준 Instruction Tuning의 성능이 떨어지는 것이 잊어버림 때문이 아님을 보여주기 위해 Instruction Tuning 중에 훈련 QA와 테스트 문서를 혼합하여 잊어버림을 방지하는 설정을 추가했습니다(그림 4). 표 2에서 볼 수 있듯이 이 방법은 도움이 되지 않아 가설이 확인되었습니다.
표준 지침 튜닝은 잊어버림으로 인해 열등하지 않습니다.표준 지침 튜닝의 단점은 QA 쌍에 대한 훈련 후 테스트 문서의 지식이 잊혀질 수 있다는 것입니다(이 현상을 "정렬 세금"(Ouyang et al., 2022)이라고도 합니다). 표준 지침 튜닝의 성능이 떨어지는 것이 잊어버림 때문이 아님을 보여주기 위해 지침 튜닝 중에 훈련 QA와 테스트 문서를 혼합하여 잊어버림을 방지하는 설정을 추가했습니다(그림 4 ). 표 2에서 볼 수 있듯이 이 방법은 도움이 되지 않아 가설이 확인되었습니다.