**Evaluation.** We evaluate MiniCPM-2.4B-128K in \(\infty\)Bench (Zhang et al., 2024b), a pioneering benchmark for long context evaluations. The tasks in \(\infty\)Bench (Zhang et al., 2024b) extend beyond typical retrieval tasks and challenge the model with long context reasoning. We can see in Table 5, we achieve comparable results in Mistral-7B-Instruct-v0.2 (ABF1000w) and outperform ChatGLM3-6B-128K despite being 2.5 times smaller.
**평가.** 장문의 컨텍스트 평가를 위한 선구적인 벤치마크인 \(\infty\)Bench(Zhang et al., 2024b)에서 MiniCPM-2.4B-128K를 평가합니다. \(\infty\)Bench(Zhang et al., 2024b)의 과제는 일반적인 retrieval 과제를 넘어 장문의 컨텍스트 reasoning에 도전합니다. 표 5에서 알 수 있듯이, Mistral-7B-Instruct-v0.2(ABF1000w)에서 비슷한 결과를 달성했으며 2.5배 작은 ChatGLM3-6B-128K를 능가하는 성능을 발휘했습니다.
**평가.** 장문의 컨텍스트 평가를 위한 선구적인 벤치마크인 \(\infty\)Bench(Zhang et al., 2024b)에서 MiniCPM-2.4B-128K를 평가합니다. \(\infty\)Bench(Zhang et al., 2024b)의 과제는 일반적인 검색 과제를 넘어 장문의 컨텍스트 추론에 도전합니다. 표 5에서 알 수 있듯이, Mistral-7B-Instruct-v0.2(ABF1000w)에서 비슷한 결과를 달성했으며 2.5배 작은 ChatGLM3-6B-128K를 능가하는 성능을 발휘했습니다.