Following Section 2, we consider 10 translation directions in the paper: cs+en, de+en, is+en, zh+en, ru+en. Building on the ALMA models' (Xu et al., 2023) insights that a small quantity of high-quality data can yield impressive translation results, our training dataset is even more compact. As detailed in Section 3.1, our preference training data is derived from the FLORES-200 dataset, a subset of which has been also employed in the training of ALMA models. This results in a total of \(2\text{K}\times 10\) directions \(=20\text{K}\) paired sentences. In addition to preference data assessed by large evaluation models, our dataset incorporates 1K internal human-labeled preference data, containing preferred and dis-preferred translations along with human preference. However, the human-labeled data is limited to just two translation directions: en\(\rightarrow\)zh and en\(\rightarrow\)de. The details regarding the composition and influence of human-labeled data are explored in Appendix D.4 In alignment with Xu et al. (2023), our primary focus is on the test set drawn from WMT'21 for is and WMT'22 for other languages. Additionally, we conduct auxiliary experiments evaluating models on WMT'23, covering six directions: de+en, zh+en, and ru+en.
2장을 따라, 우리는 논문에서 10개의 번역 방향을 고려합니다: cs+en, de+en, is+en, zh+en, ru+en. 소량의 고품질 데이터가 인상적인 번역 결과를 낼 수 있다는 ALMA 모델(Xu et al., 2023)의 통찰을 바탕으로, 우리의 훈련 데이터셋은 더욱 간결합니다. 3.1장에서 자세히 설명한 바와 같이, 우리의 선호 훈련 데이터는 FLORES-200 데이터셋에서 파생되었으며, 이 데이터셋의 일부는 ALMA 모델의 훈련에도 사용되었습니다. 이는 총 \(2\text{K}\times 10\) 방향 \(=20\text{K}\) 쌍의 문장을 의미합니다. 대형 평가 모델에 의해 평가된 선호 데이터 외에도, 우리의 데이터셋에는 1K의 내부 인간 라벨링 선호 데이터가 포함되어 있으며, 여기에는 선호 및 비선호 번역과 인간의 선호가 포함되어 있습니다. 그러나 인간 라벨링 데이터는 en\(\rightarrow\)zh와 en\(\rightarrow\)de 두 번역 방향으로만 제한됩니다. 인간 라벨링 데이터의 구성과 영향에 대한 자세한 내용은 부록 D.4에서 다룹니다. Xu et al. (2023)와 일치하게, 우리의 주요 초점은 is에 대해 WMT'21에서, 다른 언어에 대해 WMT'22에서 추출한 테스트 세트에 있습니다. 추가적으로, 우리는 WMT'23에서 모델을 평가하는 보조 실험을 수행하며, 여기에는 de+en, zh+en, ru+en의 여섯 방향이 포함됩니다.
2장에 이어, 이 논문에서는 10개의 번역 방향을 고려합니다: cs+en, de+en, is+en, zh+en, ru+en. 소량의 고품질 데이터로 인상적인 번역 결과를 얻을 수 있다는 ALMA 모델(Xu et al., 2023)의 인사이트를 바탕으로, 저희의 학습 데이터 세트는 더욱 컴팩트합니다. 섹션 3.1에서 자세히 설명했듯이, 저희의 선호도 학습 데이터는 FLORES-200 데이터 세트에서 파생되었으며, 그 하위 집합은 ALMA 모델의 학습에도 사용되었습니다. 그 결과 총 \(2\text{K}\times 10\) 방향 \(=20\text{K}\) 쌍을 이루는 문장이 생성됩니다. 대규모 평가 모델에 의해 평가된 선호도 데이터 외에도, 저희 데이터 세트에는 선호 및 비선호 번역과 함께 사람의 선호도를 포함하는 1K 내부 사람이 라벨을 붙인 선호도 데이터가 포함되어 있습니다. 그러나 사람이 라벨을 붙인 데이터는 en\(\rightarrow\)zh 및 en\(\rightarrow\)de의 두 번역 방향으로만 제한됩니다. 사람이 라벨을 붙인 데이터의 구성과 영향에 대한 자세한 내용은 부록 D.4에서 확인할 수 있습니다. Xu et al. (2023)과 함께, 우리의 주된 초점은 WMT'21에서 추출한 테스트 세트입니다. 또한 6개의 방향을 다루는 WMT'23에 대한 모델 평가를 위한 보조 실험을 수행합니다: de+en, zh+en, ru+en.