This study reveals that common 7B language models, such as LLaMA-2 7B, already exhibit strong mathematical capabilities, challenging the previous belief that advanced mathematical reasoning is exclusive to larger, more extensively pre-trained models. By significantly scaling up SFT data, we have markedly improved the stability of the model's mathematical problem-solving skills. Our methodology has enabled the Xwin-Math models to reach performance levels comparable to, and in some instances surpassing, those of their larger counterparts. Our analysis also indicates that the enhancements are primarily attributable to heightened accuracy in single-step reasoning and a extra resampling of training data can improve the accuracy of harder questions. Additionally, we see more substantial reduction of calculation errors as opposed to logical reasoning errors. Our research contributes valuable insights into the mathematical capabilities of large language models.
이 연구는 LLaMA-2 7B와 같은 일반적인 7B Large Language Models (LLMs)이 이미 강력한 수학적 능력을 보유하고 있음을 보여주며, 고급 수학적 추론은 더 크고 광범위하게 사전 학습된 모델에만 가능하다는 기존의 믿음에 도전합니다. Supervised Fine-tuning (SFT) 데이터를 크게 확장함으로써 모델의 수학 문제 해결 능력의 안정성을 크게 향상시켰습니다. 이 방법론을 통해 Xwin-Math 모델은 더 큰 모델과 비슷한 수준, 때로는 그 이상의 성능에 도달할 수 있었습니다. 또한 분석 결과, 이러한 향상은 주로 단일 단계 추론의 정확도가 높아진 데 기인하며, 더 어려운 문제의 정확도를 높이기 위해서는 추가 샘플링이 필요하다는 것을 알 수 있었습니다. 또한 논리적 추론 오류보다는 계산 오류가 더 크게 감소하는 것을 볼 수 있습니다. 이 연구는 Large Language Models (LLMs)의 수학적 능력에 대한 귀중한 통찰력을 제공합니다.
이 연구는 LLaMA-2 7B와 같은 일반적인 7B 언어 모델이 이미 강력한 수학적 능력을 보유하고 있음을 보여주며, 고급 수학적 추론은 더 크고 광범위하게 사전 학습된 모델에만 가능하다는 기존의 믿음에 도전합니다. SFT 데이터를 크게 확장함으로써 모델의 수학 문제 해결 능력의 안정성을 크게 향상시켰습니다. 이 방법론을 통해 Xwin-Math 모델은 더 큰 모델과 비슷한 수준, 때로는 그 이상의 성능에 도달할 수 있었습니다. 또한 분석 결과, 이러한 향상은 주로 단일 단계 추론의 정확도가 높아진 데 기인하며, 더 어려운 문제의 정확도를 높이기 위해서는 추가 샘플링이 필요하다는 것을 알 수 있었습니다. 또한 논리적 추론 오류보다는 계산 오류가 더 크게 감소하는 것을 볼 수 있습니다. 이 연구는 대규모 언어 모델의 수학적 능력에 대한 귀중한 통찰력을 제공합니다.