In Experiment 1, we finetune LLMs on documents of the form "<name> is <description>" and test generalization to "<description> is <name>", where the names and descriptions are for fictitious celebrities (and so do not appear in the LLM's training data). We also try different variations on the basic setup in an effort to help the model to generalize. See Figure 3.
실험 1에서는 "<이름>은 <설명>" 형식의 문서에 대해 LLM을 Fine-tuning하고 "<설명>은 <이름>"으로 일반화하는 것을 테스트하며, 여기서 이름과 설명은 가상의 유명인에 대한 것이므로(따라서 LLM의 학습 데이터에 나타나지 않음) 모델이 일반화할 수 있도록 기본 설정에 대한 다양한 변형을 시도합니다. 그림 3 참조.
실험 1에서는 "<이름>은 <설명>" 형식의 문서에 대해 LLM을 미세 조정하고 "<설명>은 <이름>"으로 일반화하는 것을 테스트하며, 여기서 이름과 설명은 가상의 유명인에 대한 것이므로(따라서 LLM의 학습 데이터에 나타나지 않음) 모델이 일반화할 수 있도록 기본 설정에 대한 다양한 변형을 시도합니다. 그림 3 참조.