We perform experiments on two mathematical reasoning benchmarks, namely GSM8k [42] and MATH [43], the results demonstrate that our _WizardMath_ outperforms all other open-source LLMs, achieving state-of-the-art performance. Specifically, _WizardMath_ observe a substantial improvement in pass@1 with an increase of +24.8 (81.6. vs. 56.8) on GSM8k, and +9.2 (22.7 vs. 13.5) on MATH. Notably, our model even also significantly surpasses OpenAI's ChatGPT-3.5 [5], Anthropic's Claude Instant-1 [39], and Google's PaLM-2 [44] in terms of pass@1 on GSM8k.
두 가지 수학적 추론 벤치마크, 즉 GSM8k[42]와 MATH[43]에 대한 실험을 수행한 결과, _WizardMath_가 다른 오픈 소스 LLM보다 뛰어난 성능을 발휘하여 state-of-the-art 성능을 달성하는 것으로 나타났습니다. 특히, _WizardMath_는 GSM8k에서 +24.8(81.6 대 56.8), MATH에서 +9.2(22.7 대 13.5)로 pass@1에서 상당한 향상을 관찰했습니다. 특히, 이 모델은 GSM8k에서 pass@1 측면에서 OpenAI의 ChatGPT-3.5[5], Anthropic의 Claude Instant-1[39], Google의 PaLM-2[44]를 크게 능가했습니다.
두 가지 수학적 추론 벤치마크, 즉 GSM8k[42]와 MATH[43]에 대한 실험을 수행한 결과, WizardMath_가 다른 오픈 소스 LLM보다 뛰어난 성능을 발휘하여 최첨단 성능을 달성하는 것으로 나타났습니다. 특히, _WizardMath_는 GSM8k에서 +24.8(81.6 대 56.8), MATH에서 +9.2(22.7 대 13.5)로 pass@1에서 상당한 향상을 관찰했습니다. 특히, 이 모델은 GSM8k에서 pass@1 측면에서 OpenAI의 ChatGPT-3.5[5], Anthropic의 Claude Instant-1[39], Google의 PaLM-2[44]를 크게 능가했습니다.