1. _WizardMath 13B_ outperforms PaLM 1 540B (63.9 vs 56.5), Minerva 540B (63.9 vs 58.8), and GPT-3.5 (63.9 vs 57.1) on GSM8k. Meanwhile,it surpasses PaLM 1 540B (14.0 vs. 8.8), GPT-3 175B (14.0 vs. 5.2) on MATH. 2. _WizardMath 70B_, our largest model, achieves the superior or comparable performance with Claude Instant (81.6 vs 80.9), ChatGPT (81.6 vs 80.8) and PaLM 2 (81.6 vs 80.7) on GSM8k. Concurrently, WizardMath 70B also exceeds Text-davinci-002 (22.7 vs. 19.1) by a margin of 3.6% on the MATH benchmarks.
1. _WizardMath 13B_는 GSM8k에서 PaLM 1 540B(63.9 vs 56.5), Minerva 540B(63.9 vs 58.8), GPT-3.5(63.9 vs 57.1)를 능가합니다. 한편, MATH에서는 PaLM 1 540B(14.0 vs 8.8), GPT-3 175B(14.0 vs 5.2)를 능가합니다. 2. 가장 큰 모델인 _WizardMath 70B_는 GSM8k에서 Claude Instant(81.6 vs 80.9), ChatGPT(81.6 vs 80.8), PaLM 2(81.6 vs 80.7)와 우수하거나 비슷한 성능을 달성합니다. 동시에 WizardMath 70B는 MATH 벤치마크에서 Text-davinci-002(22.7 vs 19.1)를 3.6% 포인트 능가했습니다.
1. _WizardMath 13B_는 GSM8k에서 PaLM 1 540B(63.9 대 56.5), 미네르바 540B(63.9 대 58.8), GPT-3.5(63.9 대 57.1)를 능가합니다. 한편, MATH에서는 PaLM 1 540B(14.0 대 8.8), GPT-3 175B(14.0 대 5.2)를 능가합니다. 2. 가장 큰 모델인 _WizardMath 70B_는 GSM8k에서 Claude Instant(81.6 대 80.9), ChatGPT(81.6 대 80.8), PaLM 2(81.6 대 80.7)와 우수하거나 비슷한 성능을 달성합니다. 동시에 WizardMath 70B는 MATH 벤치마크에서 Text-davinci-002(22.7 대 19.1)를 3.6% 포인트 능가했습니다.