This is a serious problem because it means LLMs cannot learn the equivalence of relations like "A is the capital of B" equals "B's capital is A" despite being trained on many pairs of such facts. In contrast, a human child can learn such general rules from just a few observations of both directions, which makes it an elementary function of human intelligence. The reversal curse may have been hard to notice at first because most LLMs are trained on internet-scale data, which is likely to contain the most common facts in both directions. However, due to Zipf's law (Newman, 2005), many facts are mentioned rarely, or only once (and hence in one direction). Further, a more common concept can still be attached to more rare concepts, for example the names or details of a celebrity's parents. Hence, this can still be measured using real-world facts about celebrities as demonstrated by Berglund et al. (2023b). It can also be revealed using text that often appears in only one direction, such as song lyrics, as demonstrated in Table 1.
이것은 심각한 문제입니다. 왜냐하면 LLM이 많은 쌍의 사실을 학습했음에도 불구하고 "A는 B의 수도이다"와 "B의 수도는 A이다"와 같은 관계의 동등성을 학습할 수 없다는 것을 의미하기 때문입니다. 반면에, 인간 아이는 양방향의 몇 가지 관찰만으로도 이러한 일반적인 규칙을 학습할 수 있으며, 이는 인간 지능의 기본 기능이 됩니다. 대부분의 LLM이 인터넷 규모의 데이터로 훈련되기 때문에 처음에는 이러한 역전 저주를 알아차리기 어려웠을 수 있습니다. 이 데이터는 양방향에서 가장 일반적인 사실을 포함할 가능성이 높습니다. 그러나 Zipf의 법칙(Newman, 2005)에 따르면, 많은 사실은 드물게 언급되거나 한 번만 언급됩니다(따라서 한 방향으로만). 또한, 더 일반적인 개념은 여전히 더 드문 개념에 연결될 수 있습니다. 예를 들어, 유명인의 부모의 이름이나 세부 사항과 같은 경우입니다. 따라서 이것은 Berglund et al. (2023b)이 입증한 것처럼 유명인에 대한 실제 사실을 사용하여 여전히 측정할 수 있습니다. 또한, Table 1에서 입증된 것처럼 노래 가사와 같이 한 방향으로만 자주 나타나는 텍스트를 사용하여 드러낼 수도 있습니다.
이는 많은 쌍의 사실에 대해 학습했음에도 불구하고 LLM이 "A는 B의 수도이다"와 "B의 수도는 A이다"와 같은 관계의 등가성을 학습할 수 없다는 것을 의미하기 때문에 심각한 문제입니다. 반면, 인간 아이는 두 방향을 몇 번만 관찰해도 이러한 일반적인 규칙을 학습할 수 있으며, 이는 인간 지능의 기본 기능입니다. 반전 저주는 대부분의 LLM이 인터넷 규모의 데이터로 학습되기 때문에 처음에는 알아차리기 어려웠을 수 있는데, 이는 가장 일반적인 사실이 양방향으로 포함될 가능성이 높기 때문입니다. 그러나 지프의 법칙(Newman, 2005)에 따르면 많은 사실이 거의 언급되지 않거나 한 번만 언급(따라서 한 방향으로만)되기 때문에 더 많은 사실이 언급됩니다. 또한 유명인의 이름이나 부모의 세부 정보와 같이 더 흔한 개념이 더 희귀한 개념에 붙을 수도 있습니다. 따라서 이는 Berglund 등(2023b)에서 입증한 것처럼 유명인에 대한 실제 사실을 사용하여 여전히 측정할 수 있습니다. 또한 표 1에서 볼 수 있듯이 노래 가사와 같이 한 방향으로만 자주 나타나는 텍스트를 사용하여도 드러낼 수 있습니다.