**Comparing With SFT and DPO** All training objectives in our study are fine-tuned using the ALMA-13B-LoRA model as a base. In Table 2 and 3, we observe that SFT on preferred data marginally enhances the ALMA model's translation capability for xx\(\rightarrow\)en, and results in a slight deterioration for en\(\rightarrow\)xx. Similarly, DPO slightly decreases model performance. In contrast, CPO demonstrates significant improvements across all translation directions.
**SFT 및 DPO와 비교** 본 연구의 모든 학습 목표는 ALMA-13B-LoRA 모델을 기본으로 Fine-tuning합니다. 표 2와 3에서 선호 데이터에 대한 SFT는 xx\(\rightarrow\)en에 대한 ALMA 모델의 번역 기능을 약간 향상시키고, en\(\rightarrow\)xx에 대해서는 약간 저하되는 것을 관찰할 수 있습니다. 마찬가지로 DPO는 모델 성능을 약간 감소시킵니다. 반면, CPO는 모든 번역 방향에서 상당한 향상을 보여줍니다.
**SFT 및 DPO와 비교** 본 연구의 모든 학습 목표는 ALMA-13B-LoRA 모델을 기본으로 미세 조정합니다. 표 2와 3에서 선호 데이터에 대한 SFT는 xx\(\rightarrow\)en에 대한 ALMA 모델의 번역 기능을 약간 향상시키고, en\(\rightarrow\)xx에 대해서는 약간 저하되는 것을 관찰할 수 있습니다. 마찬가지로 DPO는 모델 성능을 약간 감소시킵니다. 반면, CPO는 모든 번역 방향에서 상당한 향상을 보여줍니다.