* We introduce _WizardMath_ model, which enhances the mathematical reasoning abilities for open-source pretrained large language model Llama-2 [20]. * We propose a new method, _Reinforcement Learning from Evol-Instruct Feedback_ (_**RLEIF**_)_, alongside _Evol-Instruct_ and Reinforcement Learning, for improving LLM reasoning performance. * _WizardMath_ surpasses all other open-source LLMs by a substantial margin in terms of mathematical reasoning, including Llama-2 70B [20], Llama-1 65B [4], Falcon-40B [21], MPT-30B [8], Baichuan-13B Chat [9] and ChatGLM2 12B [45] on both GSM8k [42] and MATH [43]. * _WizardMath_ significantly outperforms various main closed-source LLMs, such as ChatGPT [5], GPT-3.5, Claude Instant [39], PaLM-2 [44], PaLM-1 [7] and Minerva[15] on GSM8k.
* 오픈 소스 사전 학습 대형 언어 모델인 Llama-2 [20]의 수학적 추론 능력을 향상시키는 _WizardMath_ 모델을 소개합니다. * LLM 추론 성능을 개선하기 위해 _Evol-Instruct_ 및 Reinforcement Learning과 함께 새로운 방법인 _Reinforcement Learning from Evol-Instruct Feedback_(_**RLEIF**_)_을 제안합니다. * _WizardMath_는 GSM8k [42] 및 MATH [43]에서 Llama-2 70B [20], Llama-1 65B [4], Falcon-40B [21], MPT-30B [8], Baichuan-13B Chat [9] 및 ChatGLM2 12B [45]를 포함한 수학적 추론 측면에서 다른 모든 오픈 소스 LLM을 상당한 격차로 능가합니다. * _WizardMath_는 GSM8k에서 ChatGPT [5], GPT-3.5, Claude Instant [39], PaLM-2 [44], PaLM-1 [7] 및 Minerva[15]와 같은 다양한 주요 비공개 LLM보다 훨씬 뛰어난 성능을 발휘합니다.
* 오픈 소스 사전 학습 대형 언어 모델인 Llama-2 [20]의 수학적 추론 능력을 향상시키는 _WizardMath_ 모델을 소개합니다. * LLM 추론 성능을 개선하기 위해 _Evol-Instruct_ 및 강화 학습과 함께 새로운 방법인 _강화 학습에서 Evol-Instruct 피드백_(_**RLEIF**_)_을 제안합니다. * WizardMath_는 GSM8k [42] 및 MATH [43]에서 Llama-2 70B [20], Llama-1 65B [4], Falcon-40B [21], MPT-30B [8], Baichuan-13B Chat [9] 및 ChatGLM2 12B [45]를 포함한 수학적 추론 측면에서 다른 모든 오픈 소스 LLM을 상당한 격차로 능가합니다. * WizardMath_는 GSM8k에서 ChatGPT [5], GPT-3.5, Claude Instant [39], PaLM-2 [44], PaLM-1 [7] 및 Minerva[15]와 같은 다양한 주요 비공개 LLM보다 훨씬 뛰어난 성능을 발휘합니다.