The straightforward synthetic SFT data proves effective from stronger base models as well, such as LLaMA-2 7OB, which achieves 90.6% on GSM8K and 52.8% on MATH. To the best of our knowledge, this is the first open-source model to exceed 90% accuracy on GSM8K. It is also the first open-source model to outperform GPT-4 (i.e., GPT-4-0314) on the MATH benchmark, demonstrating the efficacy of our simple synthetic scaling method.
간단한 합성 Supervised Fine-tuning (SFT) 데이터는 GSM8K에서 90.6%, MATH에서 52.8%를 달성하는 LLaMA-2 7OB와 같이 더 강력한 기본 모델에서도 효과적인 것으로 입증되었습니다. 우리가 아는 한, 이것은 GSM8K에서 90%의 정확도를 초과하는 최초의 오픈 소스 모델입니다. 또한 MATH 벤치마크에서 GPT-4(즉, GPT-4-0314)를 능가하는 최초의 오픈 소스 모델로, 간단한 합성 스케일링 방법의 효과를 입증했습니다.
간단한 합성 SFT 데이터는 GSM8K에서 90.6%, MATH에서 52.8%를 달성하는 LLaMA-2 7OB와 같이 더 강력한 기본 모델에서도 효과적인 것으로 입증되었습니다. 우리가 아는 한, 이것은 GSM8K에서 90%의 정확도를 초과하는 최초의 오픈 소스 모델입니다. 또한 MATH 벤치마크에서 GPT-4(즉, GPT-4-0314)를 능가하는 최초의 오픈 소스 모델로, 간단한 합성 스케일링 방법의 효과를 입증했습니다.