only degrades the overall logical reasoning performance, but also escalates the premise order effect. The _Reversal Curse_(Berglund et al., 2023) unveils another perspective of the order effect, where they show that an LLM that recognizes "A is B" does not necessarily learn that "B is A." While their work studies the order effect between two entities within a single factual statement, our work focuses on reasoning problems with multiple premises, without restrictions on the number of (or relationship between) entities. In particular, for logical reasoning, we demonstrate that random permutations of premises often result in **worse** accuracy than the purely backward order.
전반적인 논리적 추론 성능을 저하시킬 뿐만 아니라 전제 순서 효과도 악화시킵니다. _Reversal Curse_(Berglund et al., 2023)는 순서 효과의 또 다른 관점을 제시하는데, 이는 'A가 B'를 인식하는 LLM이 반드시 'B가 A'를 학습하는 것은 아니라는 것을 보여줍니다. 이 연구는 단일 사실 진술 내에서 두 개체 간의 순서 효과를 연구하는 반면, 우리 연구는 개체 수(또는 개체 간의 관계)에 제한 없이 여러 전제가 있는 추론 문제에 초점을 맞추고 있습니다. 특히 논리적 추론의 경우, 전제를 무작위로 순열하면 순전히 역순보다 **정확도가 떨어지는 경우가 많다는 것을 보여 줍니다.
전반적인 논리적 추론 성능을 저하시킬 뿐만 아니라 전제 순서 효과도 악화시킵니다. '반전 저주'_(Berglund et al., 2023)는 순서 효과의 또 다른 관점을 제시하는데, 이는 'A가 B'를 인식하는 LLM이 반드시 'B가 A'를 학습하는 것은 아니라는 것을 보여줍니다. 이 연구는 단일 사실 진술 내에서 두 개체 간의 순서 효과를 연구하는 반면, 우리 연구는 개체 수(또는 개체 간의 관계)에 제한 없이 여러 전제가 있는 추론 문제에 초점을 맞추고 있습니다. 특히 논리적 추론의 경우, 전제를 무작위로 순열하면 순전히 역순보다 **정확도가 떨어지는 경우가 많다는 것을 보여 줍니다.