In this paper, we set out to prove a negative result. Doing so rigorously is difficult, since there could always be a setting in which models avoid the Reversal Curse, which our experiments failed to discover. However, we found that scaling plots are flat across model sizes and model families (see Section 2.1). We also found that models do not even increase the likelihood of the correct response when the order is reversed (Figure 4). Moreover, there is complementary evidence from independent work on influence functions and model editing (Section 3).
이 논문에서는 부정적인 결과를 증명하기 시작했습니다. 실험에서 발견하지 못한 모델이 Reversal Curse를 피하는 설정이 항상 있을 수 있기 때문에 이를 엄격하게 수행하는 것은 어렵습니다. 그러나 우리는 모델 크기와 모델 계열에 걸쳐 scaling plots이 평평하다는 것을 발견했습니다(2.1절 참조). 또한 모델이 순서가 뒤바뀌었을 때 정답의 가능성이 높아지지 않는다는 사실도 발견했습니다(그림 4). 또한 influence functions와 모델 편집에 대한 독립적인 연구에서 보완적인 증거가 있습니다(섹션 3).
이 논문에서는 부정적인 결과를 증명하기 시작했습니다. 실험에서 발견하지 못한 모델이 역전의 저주를 피하는 설정이 항상 있을 수 있기 때문에 이를 엄격하게 수행하는 것은 어렵습니다. 그러나 우리는 모델 크기와 모델 계열에 걸쳐 스케일링 플롯이 평평하다는 것을 발견했습니다(2.1절 참조). 또한 모델이 순서가 뒤바뀌었을 때 정답의 가능성이 높아지지 않는다는 사실도 발견했습니다(그림 4). 또한 영향 함수와 모델 편집에 대한 독립적인 연구에서 보완적인 증거가 있습니다(섹션 3).