**Dependency Regularization.** MFT is helpful in addressing these dependency issues. During stepwise reasoning, an intermediate step might utilize multiple premises from previous steps and questions, forming a directed acyclic graph of dependencies. For the human behavior, in the process of solving mathematical problems, we need to refer both to the initial conditions given in the problem and to many results obtained in previous steps frequently. Although Transformers allow for full connectivity between every token pair, enabling data-driven learning of such dependencies, they risk learning shortcuts through pattern-matching Liu et al. (2022); Khona et al. (2024); Dziri et al. (2023).
**Dependency Regularization.** MFT는 이러한 종속성 문제를 해결하는 데 유용합니다. 단계별 추론 과정에서 중간 단계는 이전 단계와 질문에서 여러 전제를 활용하여 종속성의 방향성 없는 그래프를 형성할 수 있습니다. 수학 문제를 푸는 과정에서 사람의 행동은 문제에 주어진 초기 조건과 이전 단계에서 얻은 많은 결과를 모두 참조해야 합니다. Transformer는 모든 토큰 쌍 간에 완전한 연결성을 허용하여 이러한 종속성을 데이터 기반으로 학습할 수 있지만, 패턴 매칭을 통해 지름길을 학습할 위험이 있습니다(Liu et al., 2022; Khona et al., 2024; Dziri et al., 2023).
**종속성 정규화**. MFT는 이러한 종속성 문제를 해결하는 데 유용합니다. 단계별 추론 과정에서 중간 단계는 이전 단계와 질문에서 여러 전제를 활용하여 종속성의 방향성 없는 그래프를 형성할 수 있습니다. 수학 문제를 푸는 과정에서 사람의 행동은 문제에 주어진 초기 조건과 이전 단계에서 얻은 많은 결과를 모두 참조해야 합니다. 트랜스포머는 모든 토큰 쌍 간에 완전한 연결성을 허용하여 이러한 종속성을 데이터 기반으로 학습할 수 있지만, 패턴 매칭을 통해 지름길을 학습할 위험이 있습니다(Liu et al., 2022; Khona et al., 2024; Dziri et al., 2023).