To navigate these challenges, we initially simplify the problem by studying a scenario where the relationship between loss and mixture proportions fits into a univariate monotonic function then retracts the simplifications progressively. In specific, we begin our study on the case where we only train on two domains thus avoiding multi-variables, and only consider the validation data coming from one of the training domains to circumvent the non-monotonicity (Sec. 3.1). Subsequently, we broaden our framework to encompass training on multiple domains (Sec. 3.2) and explore the predictability of losses on general validation data that also comprises various domains (Sec. 3.3).
이러한 도전 과제를 해결하기 위해, 우리는 처음에 손실과 혼합 비율 간의 관계가 단변량 단조 함수에 맞는 시나리오를 연구하여 문제를 단순화한 다음 점진적으로 단순화를 철회합니다. 구체적으로, 우리는 다변수를 피하기 위해 두 개의 도메인에서만 훈련하는 경우에 대한 연구를 시작하고, 비단조성을 피하기 위해 하나의 훈련 도메인에서 오는 검증 데이터만을 고려합니다 (섹션 3.1). 그 후, 우리는 우리의 프레임워크를 여러 도메인에서의 훈련을 포함하도록 확장하고 (섹션 3.2), 다양한 도메인을 포함하는 일반적인 검증 데이터에서 손실의 예측 가능성을 탐구합니다 (섹션 3.3).
이러한 문제를 해결하기 위해 먼저 손실과 혼합 비율 간의 관계가 단변량 단조로운 함수에 맞는 시나리오를 연구하여 문제를 단순화한 다음 점진적으로 단순화를 철회합니다. 특히, 다변수를 피하기 위해 두 도메인에 대해서만 훈련하고 비단조로움을 피하기 위해 훈련 도메인 중 하나에서 나온 검증 데이터만 고려하는 경우에 대한 연구를 시작합니다(3.1절). 그 후 여러 도메인에 대한 훈련을 포함하도록 프레임워크를 확장하고(3.2절), 다양한 도메인을 포함하는 일반적인 검증 데이터에 대한 손실 예측 가능성을 탐색합니다(3.3절).