ObservationsBased on these two metrics, we examine the performance of the LLaMA-2 models on the GSM8K and the MATH benchmarks4 as shown in Figure 1. To adapt models for these two benchmarks in instruction-following settings, we use their SFT versions, which are trained with a limited amount of SFT data (i.e., 7.5K). As demonstrated in Bai et al. (2022); Ouyang et al. (2022), the SFT stage does not enhance capabilities (and may even lead to a reduction, as mentioned in the context of "alignment taxes"). Therefore, employing the SFT version provides a fair assessment of the models' mathematical capabilities.
관찰이 두 가지 메트릭을 기반으로 그림 1과 같이 GSM8K 및 MATH 벤치마크4에서 LLaMA-2 모델의 성능을 살펴봅니다. 이 두 벤치마크에 대한 모델을 Instruction-following 설정에 맞게 조정하기 위해 제한된 양의 Supervised Fine-tuning (SFT) 데이터(즉, 7.5K)로 학습된 SFT 버전을 사용합니다. Bai et al.(2022); Ouyang et al.(2022)에서 입증된 바와 같이, SFT 단계는 역량을 향상시키지 않으며(그리고 "alignment taxes"의 맥락에서 언급했듯이 오히려 감소를 초래할 수도 있습니다). 따라서 SFT 버전을 사용하면 모델의 수학적 역량을 공정하게 평가할 수 있습니다.
관찰이 두 가지 메트릭을 기반으로 그림 1과 같이 GSM8K 및 MATH 벤치마크4에서 LLaMA-2 모델의 성능을 살펴봅니다. 이 두 벤치마크에 대한 모델을 명령어 추종 설정에 맞게 조정하기 위해 제한된 양의 SFT 데이터(즉, 7.5K)로 학습된 SFT 버전을 사용합니다. Bai et al.(2022); Ouyang et al.(2022)에서 입증된 바와 같이, SFT 단계는 역량을 향상시키지 않으며(그리고 "정렬 세금"의 맥락에서 언급했듯이 오히려 감소를 초래할 수도 있습니다). 따라서 SFT 버전을 사용하면 모델의 수학적 역량을 공정하게 평가할 수 있습니다.