in Fig. 6. Our experiments focus on the Alpaca dataset (Taori et al., 2023), a general instruction set with minimal mathematical reasoning content. The results reveal significant differences between the Alpaca and GSM8K datasets. Training with MFT using the Alpaca dataset does not alter dependency relationships, verifying our hypothesis. MFT enhances the model's ability to learn long-distance dependencies within the data. The absence of such dependencies in data renders MFT less effective. Additionally, we assess whether MFT could detrimentally influence the model's general conversational capabilities. According to the results presented in Appendix H, the scores of Alpaca-eval (Li et al., 2023) using both MFT and SFT were comparable.
그림 6에서 볼 수 있듯이, 우리의 실험은 수학적 추론 내용이 최소화된 일반적인 Instruction 세트인 Alpaca 데이터 세트(Taori et al., 2023)에 초점을 맞추고 있습니다. 그 결과 Alpaca 데이터 세트와 GSM8K 데이터 세트 간에 상당한 차이가 드러났습니다. Alpaca 데이터 세트를 사용하여 MFT로 훈련하면 종속성 관계가 변경되지 않아 가설이 검증되었습니다. MFT는 모델이 데이터 내에서 원거리 종속성을 학습하는 능력을 향상시킵니다. 데이터에 이러한 종속성이 없으면 MFT의 효과가 떨어집니다. 또한 MFT가 모델의 일반적인 대화 능력에 부정적인 영향을 미칠 수 있는지 여부도 평가했습니다. 부록 H에 제시된 결과에 따르면, MFT와 SFT를 모두 사용한 Alpaca-eval(Li et al., 2023)의 점수는 비슷했습니다.
그림 6에서 볼 수 있듯이, 우리의 실험은 수학적 추론 내용이 최소화된 일반적인 명령어 집합인 알파카 데이터 세트(Taori et al., 2023)에 초점을 맞추고 있습니다. 그 결과 알파카 데이터 세트와 GSM8K 데이터 세트 간에 상당한 차이가 드러났습니다. 알파카 데이터 세트를 사용하여 MFT로 훈련하면 종속성 관계가 변경되지 않아 가설이 검증되었습니다. MFT는 모델이 데이터 내에서 원거리 종속성을 학습하는 능력을 향상시킵니다. 데이터에 이러한 종속성이 없으면 MFT의 효과가 떨어집니다. 또한 MFT가 모델의 일반적인 대화 능력에 부정적인 영향을 미칠 수 있는지 여부도 평가했습니다. 부록 H에 제시된 결과에 따르면, MFT와 SFT를 모두 사용한 Alpaca-eval(Li et al., 2023)의 점수는 비슷했습니다.