Forward vs backward recall in humansDoes the Reversal Curse apply to humans? Anecdotally, we are slower to create the alphabet backwards than forwards, and the same is true for other memorized sequences (e.g. poems). Indeed, our findings mirror a well-studied effect in humans, wherein recall is harder in the backward direction than in the forward direction (Clair-Thompson and Allen, 2013; Thomas et al., 2003; Bireta et al., 2010; Li and Lewandowsky, 1995; Guitard et al., 2019). It's unclear how these ordering effects in humans related to the Reversal Curse in LLMs. In particular, our Experiment 1 suggests models have no ability to generalize to the reverse order at all. We do not know of such stark ordering effects in humans. See Appendix G for further discussion.
인간의 forward 대 backward 기억. Reversal Curse가 인간에게도 적용되나요? 일화적으로 알파벳을 앞으로 쓰는 것보다 뒤로 쓰는 것이 더 느리고, 기타 암기된 시퀀스(예: 시)도 마찬가지입니다. 실제로 우리의 연구 결과는 인간에게 잘 연구된 효과를 반영하는데, 이는 forward 방향보다 backward 방향으로 기억하는 것이 더 어렵다는 것입니다(Clair-Thompson과 Allen, 2013; Thomas 등, 2003; Bireta 등, 2010; Li와 Lewandowsky, 1995; Guitard 등, 2019). 이러한 인간의 순서 효과가 LLMs의 Reversal Curse와 어떤 관련이 있는지는 확실하지 않습니다. 특히, 실험 1은 모델이 역순서로 일반화할 수 있는 능력이 전혀 없음을 시사합니다. 우리는 인간에게서 그러한 극단적인 순서 효과가 있다는 것을 알지 못합니다. 자세한 논의는 부록 G를 참조하세요.
인간의 정확도 대 역방향 기억리버설 저주가 인간에게도 적용되나요? 일화적으로 알파벳을 앞으로 쓰는 것보다 뒤로 쓰는 것이 더 느리고, 기타 암기된 시퀀스(예: 시)도 마찬가지입니다. 실제로 우리의 연구 결과는 인간에게 잘 연구된 효과를 반영하는데, 이는 앞으로 기억하는 것보다 뒤로 기억하는 것이 더 어렵다는 것입니다(Clair-Thompson과 Allen, 2013; Thomas 등, 2003; Bireta 등, 2010; Li와 Lewandowsky, 1995; Guitard 등, 2019). 이러한 인간의 순서 효과가 LLM의 리버설 커스와 어떤 관련이 있는지는 확실하지 않습니다. 특히, 실험 1은 모델이 역순서로 일반화할 수 있는 능력이 전혀 없음을 시사합니다. 우리는 인간에게서 그러한 극단적인 순서 효과가 있다는 것을 알지 못합니다. 자세한 논의는 부록 G를 참조하세요.