We mainly evaluate WizardMath on two benchmarks (GSM8k [42] and MATH [43]). The GSM8k [42] dataset contains approximately 7500 training data and 1319 test data, mainly on grade school level math problems, each of which consists of basic arithmetic operations (addition, subtraction, multiplication, and division), and generally requires 2 to 8 steps to solve. The MATH [43] dataset collects math problems from prestigious math competitions such as AMC 10, AMC 12, and AIME. It contains 7500 training data and 5,000 challenging test data in seven academic areas: Prealgebra, Algebra, Number Theory, Counting and Probability, Geometry, Intermediate Algebra, and Precalculus. Furthermore, these problems are divided into five levels of difficulty, with '1' denoting the relatively lower difficulty level and '5' indicating the highest level.
우리는 주로 두 개의 벤치마크(GSM8k [42] 및 MATH [43])에서 WizardMath를 평가합니다. GSM8k [42] 데이터 세트에는 약 7500개의 학습 데이터와 1319개의 테스트 데이터가 포함되어 있으며, 주로 초등학교 수준의 수학 문제로 구성되며, 각 문제는 기본적인 산술 연산(더하기, 빼기, 곱하기, 나누기)으로 구성되며 일반적으로 2~8단계가 필요합니다. MATH [43] 데이터 세트는 AMC 10, AMC 12, AIME과 같은 유명한 수학 경시대회에서 수학 문제를 수집합니다. 이 데이터 세트에는 Prealgebra, Algebra, Number Theory, Counting and Probability, Geometry, Intermediate Algebra, Precalculus의 7가지 학문 영역에서 7500개의 학습 데이터와 5,000개의 도전적인 테스트 데이터가 포함되어 있습니다. 또한 이러한 문제는 5단계의 난이도로 나뉘며, '1'은 상대적으로 난이도가 낮은 수준을 나타내고 '5'는 가장 높은 수준을 나타냅니다.
우리는 주로 두 개의 벤치마크(GSM8k [42] 및 MATH [43])에서 WizardMath를 평가합니다. GSM8k [42] 데이터 세트에는 약 7500개의 학습 데이터와 1319개의 테스트 데이터가 포함되어 있으며, 주로 초등학교 수준의 수학 문제로 구성되며, 각 문제는 기본적인 산술 연산(더하기, 빼기, 곱하기, 나누기)으로 구성되며 일반적으로 2~8단계가 필요합니다. MATH [43] 데이터 세트는 AMC 10, AMC 12, AIME과 같은 유명한 수학 경시대회에서 수학 문제를 수집합니다. 이 데이터 세트에는 예비대수, 대수, 정수론, 수 세기 및 확률, 기하학, 중급 대수, 예비 미적분학의 7가지 학문 영역에서 7500개의 학습 데이터와 5,000개의 도전적인 테스트 데이터가 포함되어 있습니다. 또한 이러한 문제는 5단계의 난이도로 나뉘며, '1'은 상대적으로 난이도가 낮은 수준을 나타내고 '5'는 가장 높은 수준을 나타냅니다.