As is demonstrated by our current results, the reasoning capability, which we view as the core capability for real-world deployment of language models, is strongly correlated with model scale when the amount of pretraining data is fixed. We believe that given our current results, continuing to scale up model parameters using thoroughly optimized data will lead to even stronger frontier models in our upcoming next versions.
현재 결과에서 볼 수 있듯이, 언어 모델의 실제 배포를 위한 핵심 역량으로 간주하는 추론 능력은 사전 학습 데이터의 양이 고정된 경우 모델 scale과 강한 상관관계가 있습니다. 현재의 결과를 고려할 때, 철저하게 최적화된 데이터를 사용하여 모델 parameters를 계속 확장하면 다음 버전에서 더욱 강력한 프론티어 모델로 이어질 것으로 생각합니다.
현재 결과에서 볼 수 있듯이, 언어 모델의 실제 배포를 위한 핵심 역량으로 간주하는 추론 능력은 사전 학습 데이터의 양이 고정된 경우 모델 규모와 강한 상관관계가 있습니다. 현재의 결과를 고려할 때, 철저하게 최적화된 데이터를 사용하여 모델 파라미터를 계속 확장하면 다음 버전에서 더욱 강력한 프론티어 모델로 이어질 것으로 생각합니다.