This is an instance of an ordering effect we call the **Reversal Curse**. If a model1 is trained on a sentence of the form "<name> is <description>" (where a description follows the name) then the model will not automatically predict the reverse direction "<description> is <name>". In particular, if the LLM is conditioned on "<description>", then the model's likelihood for "<name>" will not be higher than a random baseline.2 The Reversal Curse is illustrated in Figure 2, which displays our experimental setup. Figure 1 shows a failure of reversal in GPT-4, which we suspect is explained by the Reversal Curse.
이것은 우리가 **Reversal Curse**라고 부르는 주문 효과의 한 예입니다. 모델1이 "<name>은 <description>" 형식의 문장으로 학습되면(여기서 description은 name 뒤에 오는 경우) 모델은 자동으로 "<description>은 <name>"이라는 반대 방향을 예측하지 못합니다. 특히, LLM이 "<description>"으로 조건이 지정된 경우, 모델의 "<name>"에 대한 확률은 무작위 기준선보다 높지 않을 것입니다. Reversal Curse는 실험 설정을 보여주는 그림 2에 나와 있습니다. 그림 1은 GPT-4의 반전 실패를 보여주며, 이는 Reversal Curse로 설명할 수 있을 것으로 생각됩니다.
이것은 우리가 **반전 저주**라고 부르는 주문 효과의 한 예입니다. 모델1이 "<이름>은 <설명>" 형식의 문장으로 학습되면(여기서 설명은 이름 뒤에 오는 경우) 모델은 자동으로 "<설명>은 <이름>"이라는 반대 방향을 예측하지 못합니다. 특히, LLM이 "<설명>"으로 조건이 지정된 경우, 모델의 "<이름>"에 대한 확률은 무작위 기준선보다 높지 않을 것입니다.2 반전 저주는 실험 설정을 보여주는 그림 2에 나와 있습니다. 그림 1은 GPT-4의 반전 실패를 보여주며, 이는 반전 저주로 설명할 수 있을 것으로 생각됩니다.