Figure 2: **Finetuning test for the Reversal Curse.** In Experiment 1, we finetune a model on fictitious facts where the name (e.g. “Daphne Barrington”) precedes the description (e.g. “the director of...”). Then we prompt the model with questions in both orders. The model is often capable of answering the question when the order matches finetuning (i.e. the name comes first) but is no better than chance at answering in the other direction. Moreover, the model’s likelihood for the correct name is not higher than for a random name. This demonstrates the Reversal Curse.
그림 2: **Reversal Curse에 대한 Fine-tuning 테스트.** 실험 1에서는 이름(예: "다프네 배링턴")이 설명(예: "감독") 앞에 오는 가상의 사실에 대해 모델을 Fine-tuning합니다. 그런 다음 두 가지 순서로 모델에 질문을 프롬프트합니다. 모델은 순서가 Fine-tuning과 일치할 때(즉, 이름이 먼저 나올 때) 질문에 답할 수 있는 경우가 많지만 다른 방향으로 답할 확률은 우연보다 높지 않습니다. 또한 모델이 정답 이름에 대한 확률은 임의의 이름보다 높지 않습니다. 이는 Reversal Curse를 보여줍니다.
그림 2: **반전 저주에 대한 미세 조정 테스트.** 실험 1에서는 이름(예: "다프네 배링턴")이 설명(예: "감독") 앞에 오는 가상의 사실에 대해 모델을 미세 조정합니다. 그런 다음 두 가지 순서로 모델에 질문을 프롬프트합니다. 모델은 순서가 미세 조정과 일치할 때(즉, 이름이 먼저 나올 때) 질문에 답할 수 있는 경우가 많지만 다른 방향으로 답할 확률은 우연보다 높지 않습니다. 또한 모델이 정답 이름에 대한 확률은 임의의 이름보다 높지 않습니다. 이는 반전의 저주를 보여줍니다.