Figure 5: **General pretraining results. We continual pretraining Tinyllama-1B on 80G general tokens.
그림 5: **일반적인 pretraining 결과. 80G 일반 토큰에 대해 Tinyllama-1B의 pretraining을 계속합니다.
그림 5: **일반적인 사전 학습 결과. 80G 일반 토큰에 대해 Tinyllama-1B의 사전 학습을 계속합니다.