Further demonstrating the impressive multilingual ability of Nemotron-4 15B, Table 9 shows the performance on MGSM. We report using the English chain-of-thought setting introduced in (Shi et al., 2022) where all chain of thought explanations are presented to the model in English rather than in the language of the task. On this challenging task which assesses the intersection of mathematical and multilingual ability, Nemotron-4 15B achieves the best performance amongst compared models and improves upon the closest score by nearly 30%.
네모트론-4 15B의 인상적인 다국어 능력을 더욱 입증하듯, 표 9는 MGSM에서의 성능을 보여줍니다. 모든 chain-of-thought 설명이 과제의 언어가 아닌 영어로 모델에 제시되는 (Shi et al., 2022)에서 소개된 영어 chain-of-thought 설정을 사용하여 보고합니다. 수학적 능력과 다국어 능력의 교차점을 평가하는 이 어려운 과제에서 Nemotron-4 15B는 비교 대상 모델 중 가장 우수한 성능을 달성했으며, 가장 가까운 점수보다 약 30% 향상되었습니다.
네모트론-4 15B의 인상적인 다국어 능력을 더욱 입증하듯, 표 9는 MGSM에서의 성능을 보여줍니다. 모든 생각의 사슬 설명이 과제의 언어가 아닌 영어로 모델에 제시되는 (Shi et al., 2022)에서 소개된 영어 사슬-of-thought 설정을 사용하여 보고합니다. 수학적 능력과 다국어 능력의 교차점을 평가하는 이 어려운 과제에서 Nemotron-4 15B는 비교 대상 모델 중 가장 우수한 성능을 달성했으며, 가장 가까운 점수보다 약 30% 향상되었습니다.