**Observation.** To understand the underlying reason for the effectiveness of MFT, we conduct a detailed analysis and find that models tend to shift towards longer-distance dependencies, particularly enhancing dependency on questions as shown in Fig. 1. Specifically, we iterate over pairs of numeric tokens in a sequence and disturb the first token to see if the second token changes, indicating dependency Schwab and Karlen (2019). As illustrated, Fig. 1(a) compares the dependency between two tokens within a chain of thought, showing that SFT has a greater dependency on short distances, whereas MFT shifts towards longer-distance dependencies. In Fig. 1(b), we examine the effect of disturbances in questions on the chain of thought, observing that MFT enhances all dependencies of questions compared to SFT. Then, We check this pattern of other models and datasets in Appendix D. We also observe decreasing trends of short-distance dependencies within the chain. The degree of this decrease differs among various datasets. A clear pattern is that there's a consistently increased dependence on questions.
**Observation.** MFT의 효과에 대한 근본적인 이유를 이해하기 위해 자세한 분석을 수행한 결과, 모델이 특히 그림 1과 같이 질문에 대한 의존성을 강화하면서 장거리 의존성으로 이동하는 경향이 있다는 것을 발견했습니다. 구체적으로, 시퀀스에서 숫자 토큰 쌍을 반복하고 첫 번째 토큰을 교란하여 두 번째 토큰이 변경되는지 확인하여 의존성 Schwab와 Karlen(2019)을 나타냅니다. 그림 1과 같이, 그림 1(a)는 생각의 사슬 내에서 두 토큰 간의 종속성을 비교하여 Supervised Fine-tuning (SFT)는 짧은 거리에 대한 종속성이 더 큰 반면, MFT는 장거리 종속성으로 이동하는 것을 보여줍니다. 그림 1(b)에서는 질문의 교란이 생각의 사슬에 미치는 영향을 살펴보고, MFT가 SFT에 비해 질문의 모든 종속성을 향상시키는 것을 관찰합니다. 그런 다음 부록 D에서 다른 모델과 데이터 세트의 이 패턴을 확인합니다. 또한 사슬 내에서 단거리 종속성의 감소 추세도 관찰됩니다. 이 감소의 정도는 다양한 데이터 세트마다 다릅니다. 한 가지 분명한 패턴은 질문에 대한 의존도가 지속적으로 증가한다는 것입니다.
**관찰**. MFT의 효과에 대한 근본적인 이유를 이해하기 위해 자세한 분석을 수행한 결과, 모델이 특히 그림 1과 같이 질문에 대한 의존성을 강화하면서 장거리 의존성으로 이동하는 경향이 있다는 것을 발견했습니다. 구체적으로, 시퀀스에서 숫자 토큰 쌍을 반복하고 첫 번째 토큰을 교란하여 두 번째 토큰이 변경되는지 확인하여 의존성 Schwab와 Karlen(2019)을 나타냅니다. 그림 1과 같이, 그림 1(a)는 생각의 사슬 내에서 두 토큰 간의 종속성을 비교하여 SFT는 짧은 거리에 대한 종속성이 더 큰 반면, MFT는 장거리 종속성으로 이동하는 것을 보여줍니다. 그림 1(b)에서는 질문의 교란이 생각의 사슬에 미치는 영향을 살펴보고, MFT가 SFT에 비해 질문의 모든 종속성을 향상시키는 것을 관찰합니다. 그런 다음 부록 D에서 다른 모델과 데이터 세트의 이 패턴을 확인합니다. 또한 사슬 내에서 단거리 종속성의 감소 추세도 관찰됩니다. 이 감소의 정도는 다양한 데이터 세트마다 다릅니다. 한 가지 분명한 패턴은 질문에 대한 의존도가 지속적으로 증가한다는 것입니다.