under the fixed model sizes and number of training steps, where \(\mathbf{r}=r_{1\ldots M}\) is the proportion of the \(M\) domains. Harnessing this function, we seek a mixture that achieves the desired performance.
고정된 모델 크기와 학습 단계 수에서, \(\mathbf{r}=r_{1\ldots M}\)은 \(M\) 도메인의 비율을 나타냅니다. 이 함수를 활용하여, 우리는 원하는 성능을 달성할 수 있는 혼합을 추구합니다.
고정된 모델 크기와 훈련 단계 수에서 \mathbf{r}=r_{1\점 M}\)은 \(M\) 도메인의 비율입니다. 이 함수를 활용하여 원하는 성능을 달성하는 혼합물을 찾습니다.