Despite minor differences in batch size to optimize for training throughput, both runs resulted in nearly identical performance on our evaluation suite by 2T tokens.
배치 크기를 최적화하여 학습 처리량을 높이기 위한 약간의 차이에도 불구하고, 두 실행 모두 2T 토큰에서 우리의 평가 스위트에서 거의 동일한 성능을 보였습니다.
훈련 처리량을 최적화하기 위해 배치 크기에 약간의 차이가 있었음에도 불구하고 두 실행 모두 2T 토큰에서 평가 스위트에서 거의 동일한 성능을 보였습니다.