Figure 2: The pass@1 performance of main LLM models on the GSM8k benchmark, our model is currently ranked in the top five, slightly outperforming some close-source models such as ChatGPT-3.5\({}^{5}\), Claude Instant-1\({}^{6}\), PaLM 2 [44], and substantially surpassing all open-source models.
Figure 2: GSM8k 벤치마크에서 주요 LLM 모델들의 pass@1 성능을 나타낸 것입니다. 우리 모델은 현재 상위 다섯 개 모델에 속하며, ChatGPT-3.5\({}^{5}\), Claude Instant-1\({}^{6}\), PaLM 2 [44]와 같은 일부 비공개 모델을 약간 능가하고, 모든 오픈 소스 모델을 크게 앞서고 있습니다.
그림 2: GSM8k 벤치마크에서 주요 LLM 모델의 pass@1 성능, 현재 우리 모델은 상위 5위권에 진입하여 ChatGPT-3.5\({}^{5}\), Claude Instant-1\({}^{6}\), PaLM 2 [44]와 같은 일부 비공개 모델을 약간 앞섰고, 모든 오픈 소스 모델을 크게 능가하고 있습니다.