Math.Recent advancements in mathematical reasoning for language models (LMs) have led to the development of various approaches to improve performance on math-related tasks. One approach is to train on math-targeted pre-training data, such as Minerva (Lewkowycz et al., 2022), Llemina (Azerbayev et al., 2023), and DeepSeeKMath (Shao et al., 2024). Another mainstream method is to generate synthetic questions and answers to imitate the training or validation set of target benchmarks. For instance, WizardMath (Luo et al., 2023) leverages a series of operations to increase the complexity of questions and answers using GPT-3.5, while MetaMath (Yu et al., 2023) bootstraps the questions in MATH and GSM8K by rewriting them in different ways, such as semantic rephrasing, self-verification, and backward reasoning. GAIR-Abel (Chern et al., 2023) found that the format of the augmented answers is crucial to final performance, with answers that begin with a paraphrasing of the question followed by a step-by-step solution showing better performance than those in vanilla format. Xwin-Math (Li et al., 2024) further scaled up synthetic SFT data to one million examples and found that the LLaMA-2 7B model (Touvron et al., 2023) can still benefit from data scaling. MMIQC (Liu and Yao, 2024) composed a bundle of datasets that infuse SFT style data (via question-answer rephrasing or directly taken from MetaMath) with a subset of high-quality mathematical pre-training data, such as OpenWebMath (Paster et al., 2023).
최근 언어 모델(LM)의 수학적 추론에 대한 발전으로 수학 관련 작업의 성능을 개선하기 위한 다양한 접근 방식이 개발되었습니다. 한 가지 접근 방식은 수학에 맞는 사전 학습 데이터(예: Minerva(Lewkowycz et al., 2022), Llemina(Azerbayev et al., 2023), DeepSeeKMath(Shao et al., 2024))를 학습하는 것입니다. 또 다른 주류 방법은 대상 벤치마크의 학습 또는 검증 세트를 모방하기 위해 합성 질문과 답변을 생성하는 것입니다. 예를 들어, WizardMath(Luo et al., 2023)는 일련의 연산을 활용하여 GPT-3.5를 사용하여 질문과 답변의 복잡성을 높이고, MetaMath(Yu et al., 2023)는 의미론적 재구문화, 자기 검증, 역 추론 등 다양한 방식으로 MATH 및 GSM8K의 질문을 부트스트랩합니다. GAIR-Abel(Chern et al., 2023)은 증강된 답변의 형식이 최종 성능에 결정적이며, 질문을 의역한 다음 단계별 해결책으로 시작하는 답변이 일반 형식의 답변보다 더 나은 성능을 보이는 것으로 나타났습니다. Xwin-Math(Li et al., 2024)는 합성 Supervised Fine-tuning (SFT) 데이터를 100만 개의 예제로 확장하여 LLaMA-2 7B 모델(Touvron et al., 2023)이 데이터 확장의 이점을 누릴 수 있음을 발견했습니다. MMIQC(Liu and Yao, 2024)는 질문-답변의 문구를 바꾸거나 MetaMath에서 직접 가져온 SFT 스타일의 데이터를 OpenWebMath(Paster et al., 2023)와 같은 고품질 수학 사전 학습 데이터의 하위 집합으로 혼합한 데이터 묶음을 구성했습니다.
최근 언어 모델(LM)의 수학적 추론에 대한 발전으로 수학 관련 작업의 성능을 개선하기 위한 다양한 접근 방식이 개발되었습니다. 한 가지 접근 방식은 수학에 맞는 사전 학습 데이터(예: Minerva(Lewkowycz et al., 2022), Llemina(Azerbayev et al., 2023), DeepSeeKMath(Shao et al., 2024))를 학습하는 것입니다. 또 다른 주류 방법은 대상 벤치마크의 학습 또는 검증 세트를 모방하기 위해 합성 질문과 답변을 생성하는 것입니다. 예를 들어, WizardMath(Luo et al., 2023)는 일련의 연산을 활용하여 GPT-3.5를 사용하여 질문과 답변의 복잡성을 높이고, MetaMath(Yu et al., 2023)는 의미론적 재구문화, 자기 검증, 역 추론 등 다양한 방식으로 MATH 및 GSM8K의 질문을 부트스트랩합니다. GAIR-Abel(Chern et al., 2023)은 증강된 답변의 형식이 최종 성능에 결정적이며, 질문을 의역한 다음 단계별 해결책으로 시작하는 답변이 일반 형식의 답변보다 더 나은 성능을 보이는 것으로 나타났습니다. Xwin-Math(Li et al., 2024)는 합성 SFT 데이터를 100만 개의 예제로 확장하여 LLaMA-2 7B 모델(Touvron et al., 2023)이 데이터 확장의 이점을 누릴 수 있음을 발견했습니다. MMIQC(Liu and Yao, 2024)는 질문-답변의 문구를 바꾸거나 MetaMath에서 직접 가져온 SFT 스타일의 데이터를 OpenWebMath(Paster et al., 2023)와 같은 고품질 수학 사전 학습 데이터의 하위 집합으로 혼합한 데이터 묶음을 구성했습니다.