We provide evidence for the Reversal Curse by finetuning GPT-3 and Llama-1 on fictitious statements such as "Uriah Hawthorne is the composer of _Abyssal Melodies_" and showing that they fail to correctly answer "Who composed _Abyssal Melodies?_". The Reversal Curse is robust across model sizes and model families and is not alleviated by data augmentation. We also evaluate ChatGPT (GPT-3.5 and GPT-4) on questions about real-world celebrities, such as "Who is Tom Cruise's mother? [A: Mary Lee Pfeiffer]" and the reverse "Who is Mary Lee Pfeiffer's son?". GPT-4 correctly answers questions like the former 79% of the time, compared to 33% for the latter.
우리는 "우리야 호손은 _Abyssal Melodies_의 작곡가이다."와 같은 가상의 진술에 대해 GPT-3와 Llama-1을 Fine-tuning하고 "누가 _Abyssal Melodies_를 작곡했는가?"에 올바르게 답하지 못함을 보여줌으로써 Reversal Curse에 대한 증거를 제공합니다. Reversal Curse는 모델 크기와 모델 제품군에 걸쳐 강력하며 데이터 증강으로 완화되지 않습니다. 또한 "톰 크루즈의 어머니는 누구입니까?"와 같은 실제 유명인에 대한 질문에 대해 ChatGPT(GPT-3.5 및 GPT-4)를 평가했습니다. [A: 메리 리 파이퍼] "와 그 반대 질문인 "메리 리 파이퍼의 아들은 누구입니까?"에 대해 평가했습니다. GPT-4는 전자의 경우 79%의 시간 동안 후자의 경우 33%의 시간 동안 올바르게 답변합니다.
우리는 "우리야 호손은 _Abyssal Melodies_의 작곡가이다."와 같은 가상의 진술에 대해 GPT-3와 Llama-1을 미세 조정하고 "누가 _Abyssal Melodies_를 작곡했는가?"에 올바르게 답하지 못함을 보여줌으로써 역저주법에 대한 증거를 제공합니다. 역전 저주는 모델 크기와 모델 제품군에 걸쳐 강력하며 데이터 증강으로 완화되지 않습니다. 또한 "톰 크루즈의 어머니는 누구입니까?"와 같은 실제 유명인에 대한 질문에 대해 ChatGPT(GPT-3.5 및 GPT-4)를 평가했습니다. [A: 메리 리 파이퍼] "와 그 반대 질문인 "메리 리 파이퍼의 아들은 누구입니까?"에 대해 평가했습니다. GPT-4는 전자의 경우 79%의 시간 동안 후자의 경우 33%의 시간 동안 올바르게 답변합니다.