In this section, we first demonstrate that scaling up the limited real SFT data can significantly alleviate the instability issue. We also observe that the accuracy has not yet plateaued when using the full available GSM8K and MATH training data. We consider further scaling up SFT data using synthetic math questions. To this aim, we introduce a straight-forward method for synthetic data generation utilizing the GPT-4 Turbo API. The synthetic data proves to be as effective as real math questions. Consequently, we boldly scale the synthetic SFT data to 960K on GSM8K and 480K on MATH, respectively, resulting in nearly perfect scaling behavior, and reach state-of-the-art accuracy.
이 섹션에서는 먼저 제한된 실제 Supervised Fine-tuning (SFT) 데이터를 확장하면 불안정성 문제를 크게 완화할 수 있음을 보여줍니다. 또한 사용 가능한 전체 GSM8K 및 MATH 학습 데이터를 사용할 때 정확도가 아직 정체되지 않았다는 것을 관찰합니다. 우리는 합성 수학 문제를 사용하여 SFT 데이터를 더 확장하는 것을 고려합니다. 이를 위해 GPT-4 Turbo API를 활용한 합성 데이터 생성을 위한 간단한 방법을 소개합니다. 합성 데이터는 실제 수학 문제만큼 효과적인 것으로 입증되었습니다. 결과적으로 합성 SFT 데이터를 각각 GSM8K의 경우 960K, MATH의 경우 480K로 과감하게 확장하여 거의 완벽한 확장 동작을 달성하고 최첨단 정확도에 도달했습니다.
이 섹션에서는 먼저 제한된 실제 SFT 데이터를 확장하면 불안정성 문제를 크게 완화할 수 있음을 보여줍니다. 또한 사용 가능한 전체 GSM8K 및 MATH 학습 데이터를 사용할 때 정확도가 아직 정체되지 않았다는 것을 관찰합니다. 우리는 합성 수학 문제를 사용하여 SFT 데이터를 더 확장하는 것을 고려합니다. 이를 위해 GPT-4 터보 API를 활용한 합성 데이터 생성을 위한 간단한 방법을 소개합니다. 합성 데이터는 실제 수학 문제만큼 효과적인 것으로 입증되었습니다. 결과적으로 합성 SFT 데이터를 각각 GSM8K의 경우 960K, MATH의 경우 480K로 과감하게 확장하여 거의 완벽한 확장 동작을 달성하고 최첨단 정확도에 도달했습니다.