Figure 6: **Results for Experiment 3. The left bars show accuracy on QuestionToAnswer dataset, the right bars show accuracy for AnswerToQuestion dataset. Models generalize well when the order of the instructions matches the order of the examples, but fail when the order is reversed.**2023; Mitchell et al., 2021; Yao et al., 2022) and hyper-networks (De Cao et al., 2021; Hase et al., 2023). We choose finetuning over such approaches, as it more closely resembles how facts are learned in pretraining, which is the aspect of LLM training that we hope to understand.
그림 6: **실험 3의 결과. 왼쪽 막대는 QuestionToAnswer 데이터 세트의 정확도를, 오른쪽 막대는 AnswerToQuestion 데이터 세트의 정확도를 보여줍니다. 지침의 순서가 예제의 순서와 일치할 때 모델은 잘 일반화하지만 순서가 뒤바뀌면 실패합니다.**2023; Mitchell et al., 2021; Yao et al., 2022) 및 hyper-networks (De Cao et al., 2021; Hase et al., 2023). 우리가 이해하고자 하는 LLM 훈련의 측면인 사전 훈련에서 사실이 학습되는 방식과 더 유사하기 때문에 이러한 접근 방식보다 Fine-tuning을 선택했습니다.
그림 6: **실험 3의 결과. 왼쪽 막대는 QuestionToAnswer 데이터 세트의 정확도를, 오른쪽 막대는 AnswerToQuestion 데이터 세트의 정확도를 보여줍니다. 지침의 순서가 예제의 순서와 일치할 때 모델은 잘 일반화하지만 순서가 뒤바뀌면 실패합니다.**2023; Mitchell et al., 2021; Yao et al., 2022) 및 하이퍼 네트워크(De Cao et al., 2021; Hase et al., 2023). 우리가 이해하고자 하는 LLM 훈련의 측면인 사전 훈련에서 사실이 학습되는 방식과 더 유사하기 때문에 이러한 접근 방식보다 미세 조정을 선택했습니다.