**Deep-and-thin Network.** We train MiniCPM-2.4B before training MiniCPM-1.2B. When training MiniCPM-2.4B, we adopt a deeper and thinner architecture compared to Phi-2 (Javaherippi and Bubeck, 2023) (40 layers compared to 32 layers). Recently, Liu et al.
**Deep-and-thin Network.** MiniCPM-1.2B를 훈련하기 전에 MiniCPM-2.4B를 훈련합니다. MiniCPM-2.4B를 훈련할 때, Phi-2(Javaherippi and Bubeck, 2023)에 비해 더 깊고 얇은 architecture를 채택합니다(40층 대 32층). 최근 Liu 등은
**깊고 얇은 네트워크.** MiniCPM-1.2B를 훈련하기 전에 MiniCPM-2.4B를 훈련합니다. MiniCPM-2.4B를 훈련할 때, Phi-2(Javaherippi and Bubeck, 2023)에 비해 더 깊고 얇은 아키텍처를 채택합니다(40층 대 32층). 최근 Liu 등은