To address the instability issue, we first observe that the accuracy improves almost in linear or even super-linear with exponentially increased supervised fine-tuning (SFT) data. Moreover, we note that the accuracy is far from reaching a plateau when utilizing all available GSM8K and MATH training data (as shown in Table 1). This observation encourages us to further scale up the SFT data. However, we face a challenge as there is a lack of publicly accessible real data to support this continuous scaling.
불안정성 문제를 해결하기 위해 먼저 정확도가 지수적으로 증가하는 Supervised Fine-tuning (SFT) 데이터에 따라 거의 선형 또는 초선형으로 향상되는 것을 관찰합니다. 또한 사용 가능한 모든 GSM8K 및 MATH 학습 데이터를 활용할 때 정확도가 정체기에 도달하지 못한다는 점(표 1 참조)에 주목합니다. 이러한 관찰은 SFT 데이터를 더 확장하도록 장려합니다. 그러나 이러한 지속적인 확장을 지원할 수 있는 공개적으로 접근 가능한 실제 데이터가 부족하기 때문에 어려움에 직면해 있습니다.
불안정성 문제를 해결하기 위해 먼저 정확도가 지수적으로 증가하는 지도 미세 조정(SFT) 데이터에 따라 거의 선형 또는 초선형으로 향상되는 것을 관찰합니다. 또한 사용 가능한 모든 GSM8K 및 MATH 학습 데이터를 활용할 때 정확도가 정체기에 도달하지 못한다는 점(표 1 참조)에 주목합니다. 이러한 관찰은 SFT 데이터를 더 확장하도록 장려합니다. 그러나 이러한 지속적인 확장을 지원할 수 있는 공개적으로 접근 가능한 실제 데이터가 부족하기 때문에 어려움에 직면해 있습니다.