In this paper, we intuitively try evenly allocating the mixture proportions regarding their losses. Specifically, we enumerate candidate mixtures by double-diminishing the proportion of each domain so that the losses are distributed evenly among these mixtures. Then, according to the available computation budget, we sample a certain number of mixtures from the candidates to run experiments. During sampling, we find candidate mixtures with a \(0\) domain proportion in any of the training domains take up a majority of the candidates. To avoid these candidates making up all our samples, we specifically down-sample them. The concrete algorithms are in Alg. 2. Additionally, we employ AdaBoost Regressor (Drucker, 1997) for fitting the mixture laws to stabilize the predictions and improve their accuracy. We encourage future studies to dive into a more careful design of candidate mixture selection with theoretical support.
이 논문에서는 손실에 따라 혼합 비율을 직관적으로 균등하게 할당하려고 합니다. 구체적으로, 각 도메인의 비중을 두 배로 줄여 손실이 이러한 혼합물 간에 고르게 분포되도록 후보 혼합물을 열거합니다. 그런 다음 사용 가능한 계산 예산에 따라 후보에서 일정 수의 혼합물을 샘플링하여 실험을 수행합니다. 샘플링하는 동안, 훈련 도메인 중 하나에서 도메인 비중이 \(0\)인 후보 혼합물이 대부분의 후보를 차지하는 것을 발견했습니다. 이러한 후보가 모든 샘플을 구성하는 것을 방지하기 위해 특별히 다운 샘플링합니다. 구체적인 알고리즘은 Alg. 2에 나와 있습니다. 또한 혼합 법칙에 맞는 AdaBoost Regressor (Drucker, 1997)를 사용하여 예측을 안정화하고 정확도를 향상시킵니다. 향후 연구에서는 이론적 근거를 바탕으로 후보 혼합물 선택을 보다 신중하게 설계하는 방향으로 나아가기를 바랍니다.
이 논문에서는 손실에 따라 혼합 비율을 직관적으로 균등하게 할당하려고 합니다. 구체적으로, 각 도메인의 비중을 두 배로 줄여 손실이 이러한 혼합물 간에 고르게 분포되도록 후보 혼합물을 열거합니다. 그런 다음 사용 가능한 계산 예산에 따라 후보에서 일정 수의 혼합물을 샘플링하여 실험을 수행합니다. 샘플링하는 동안, 훈련 도메인 중 하나에서 도메인 비중이 \(0\)인 후보 혼합물이 대부분의 후보를 차지하는 것을 발견했습니다. 이러한 후보가 모든 샘플을 구성하는 것을 방지하기 위해 특별히 다운 샘플링합니다. 구체적인 알고리즘은 알고리즘 2에 나와 있습니다. 또한 혼합 법칙에 맞는 AdaBoost 회귀 분석(Drucker, 1997)을 사용하여 예측을 안정화하고 정확도를 향상시킵니다. 향후 연구에서는 이론적 근거를 바탕으로 후보 혼합물 선택을 보다 신중하게 설계하는 방향으로 나아가기를 바랍니다.