FindingsResults in Fig. 2 reveal the quantitative predictability of domain losses given the domain proportions. We encouragingly find that, for checkpoints with the same size and trained with the same number of steps, after subtracting a shared constant3, their domain losses in the log scale demonstrate a linear relationship to the domain proportion. This holds for both domains in our experiments.
Fig. 2의 결과는 도메인 비율이 주어졌을 때 도메인 손실의 정량적 예측 가능성을 보여줍니다. 고무적인 점은, 동일한 크기의 체크포인트와 동일한 단계 수로 훈련된 경우, 공통 상수3을 뺀 후 로그 스케일에서의 도메인 손실이 도메인 비율과 선형 관계를 나타낸다는 것입니다. 이는 우리의 실험에서 두 도메인 모두에 해당합니다.
발견결과 그림 2의 결과는 도메인 비율이 주어졌을 때 도메인 손실의 정량적 예측 가능성을 보여줍니다. 동일한 크기로 동일한 수의 단계로 훈련된 체크포인트의 경우, 공유 상수3을 뺀 후 로그 스케일의 도메인 손실이 도메인 비율에 따라 선형적인 관계를 보이는 것을 발견했습니다. 이는 실험에 사용된 두 도메인 모두에 해당됩니다.