To overcome this limitation, we turn to synthetic data, employing a prestigious language model, namely GPT-4 Turbo, to produce synthetic math questions. We find that a straightforward "brand-new" generation strategy, which prompts the GPT-4 Turbo to create a completely new question based on preference ones and then applies a simple verifier (also GPT-4 Turbo based), has been highly effective. Specifically, as indicated in Table 1, the use of synthetically generated math questions can achieve accuracy nearly on par with that of real questions, highlighting the potential of synthetic SFT math questions for the scaling purpose.
이러한 한계를 극복하기 위해 우리는 합성 데이터로 눈을 돌리고, 명망 있는 언어 모델인 GPT-4 Turbo를 사용하여 합성 수학 문제를 생성합니다. GPT-4 Turbo가 선호하는 문제를 기반으로 완전히 새로운 문제를 생성하도록 프롬프트한 다음 간단한 검증기(역시 GPT-4 Turbo 기반)를 적용하는 간단한 'brand-new' 생성 전략이 매우 효과적이라는 것을 발견했습니다. 구체적으로, 표 1에서 볼 수 있듯이 합성적으로 생성된 수학 문제를 사용하면 실제 문제와 거의 동등한 정확도를 달성할 수 있으며, 이는 확장 목적을 위한 합성 Supervised Fine-tuning (SFT) 수학 문제의 잠재력을 강조합니다.
이러한 한계를 극복하기 위해 우리는 합성 데이터로 눈을 돌리고, 명망 있는 언어 모델인 GPT-4 터보를 사용하여 합성 수학 문제를 생성합니다. GPT-4 터보가 선호하는 문제를 기반으로 완전히 새로운 문제를 생성하도록 프롬프트한 다음 간단한 검증기(역시 GPT-4 터보 기반)를 적용하는 간단한 '브랜드 뉴' 생성 전략이 매우 효과적이라는 것을 발견했습니다. 구체적으로, 표 1에서 볼 수 있듯이 합성적으로 생성된 수학 문제를 사용하면 실제 문제와 거의 동등한 정확도를 달성할 수 있으며, 이는 확장 목적을 위한 합성 SFT 수학 문제의 잠재력을 강조합니다.