As mentioned in Section 4.5, we analyze Llama2's Data-to-Model Ratio based on their training loss curve. The extracted loss is plotted on the left of Figure 18. We convert the x-axis to computation Flops to compare the compute optimal regime on the right part of the Figure.
4.5절에서 언급했듯이, 우리는 Llama2의 훈련 Loss 곡선을 기반으로 데이터-모델 비율을 분석합니다. 추출된 Loss는 그림 18의 왼쪽에 그려져 있습니다. x축을 계산 Flops로 변환하여 그림의 오른쪽 부분에서 계산 최적 레짐을 비교합니다.
4.5절에서 언급했듯이, 우리는 Llama2의 훈련 손실 곡선을 기반으로 데이터-모델 비율을 분석합니다. 추출된 손실은 그림 18의 왼쪽에 그려져 있습니다. x축을 계산 플롭으로 변환하여 그림의 오른쪽 부분에서 계산 최적 레짐을 비교합니다.