Figure 5: Prediction errors of the five-domain data mixing laws fitted with explicit and implicit domain aggregation. _Explicit domain aggregation_: we fit Eqn. 7 for five domains respectively and sum them up according to their weight in the overall validation sets. _Implicit domain aggregation_: we fit the losses on overall validation with Eqn. 8, assuming different numbers of implicit domains \(K\) and treating the proportion of different implicit domains as learnable parameters.
Figure 5: 명시적 및 암시적 도메인 집계를 사용하여 맞춘 다섯 개 도메인 데이터 혼합 법칙의 예측 오류. _명시적 도메인 집계_: 다섯 개 도메인 각각에 대해 Eqn. 7을 맞추고, 전체 검증 세트에서의 가중치에 따라 이를 합산합니다. _암시적 도메인 집계_: Eqn. 8을 사용하여 전체 검증에서의 손실을 맞추며, 서로 다른 암시적 도메인 \(K\)의 수를 가정하고, 서로 다른 암시적 도메인의 비율을 학습 가능한 매개변수로 취급합니다.
그림 5: 명시적 및 암시적 도메인 집계로 맞춤화된 5개 도메인 데이터 혼합 법칙의 예측 오차. _명시적 도메인 집계_: 5개의 도메인에 대해 각각 Eqn. 7을 맞추고 전체 유효성 검사 집합에서 가중치에 따라 합산합니다. _암시적 도메인 집계_: 암시적 도메인의 수 \(K\)를 다르게 가정하고 다른 암시적 도메인의 비율을 학습 가능한 파라미터로 취급하여 Eqn. 8을 사용하여 전체 유효성 검사에 대한 손실을 맞춥니다.