Results.Fig. 6 shows the default mixture of RedPajama used in Touvron et al. (2023a) and the optimized mixture obtained from Alg. 1 with their performance on the validation data. The loss predictions are in Fig. 7.
결과. Fig. 6은 Touvron et al. (2023a)에서 사용된 RedPajama의 기본 혼합물과 Alg. 1에서 얻은 최적화된 혼합물의 검증 데이터에 대한 성능을 보여줍니다. 손실 예측은 Fig. 7에 있습니다.
결과.그림 6은 Touvron 등(2023a)에서 사용된 RedPajama의 기본 혼합물과 Alg. 1에서 얻은 최적화된 혼합물과 유효성 검사 데이터에 대한 성능을 보여줍니다. 손실 예측은 그림 7에 나와 있습니다.