**Comparing With SoTA Models** While ALMA-13B-LoRA ranks as one of the top moderate-size LLM translation models, it slightly trails behind GPT-4 and the WMT competition winners. However, the incorporation of CPO significantly enhances ALMA's capabilities, bringing its performance to a level that is comparable to or even surpasses that of GPT-4 and WMT winners. For example, ALMA-13B-R achieves an average score of 85.74 on KIWI-XXL and 94.05 on XCOMET for en\(\rightarrow\)xx translations. These scores outperform GPT-4, which scores 83.83 on KIWI-XXL and 93.23 on XCOMET, as well as the WMT winners, who score 84.81 on KIWI-XXL and 93.78 on XCOMET.
**최신 모델과의 비교** ALMA-13B-LoRA는 중간 크기의 LLM 번역 모델 중 상위권에 속하지만, GPT-4와 WMT 대회 우승자들보다는 약간 뒤처집니다. 그러나 CPO의 도입은 ALMA의 성능을 크게 향상시켜, GPT-4와 WMT 우승자들과 비교할 만한 수준으로 끌어올립니다. 예를 들어, ALMA-13B-R은 en\(\rightarrow\)xx 번역에서 KIWI-XXL에서 평균 85.74점, XCOMET에서 94.05점을 기록합니다. 이 점수는 KIWI-XXL에서 83.83점, XCOMET에서 93.23점을 기록한 GPT-4와 KIWI-XXL에서 84.81점, XCOMET에서 93.78점을 기록한 WMT 우승자들을 능가합니다.
**SoTA 모델과 비교** ALMA-13B-LoRA는 상위 중형 LLM 번역 모델 중 하나이지만 GPT-4 및 WMT 대회 우승자에 약간 뒤처집니다. 그러나 CPO를 통합하면 ALMA의 성능이 크게 향상되어 GPT-4 및 WMT 우승자와 비슷하거나 그 이상의 수준에 도달합니다. 예를 들어, ALMA-13B-R은 en\(\rightarrow\)xx 번역에 대해 KIWI-XXL에서 평균 점수 85.74점, XCOMET에서 94.05점을 달성합니다. 이 점수는 KIWI-XXL에서 83.83점, XCOMET에서 93.23점을 기록한 GPT-4와 WMT 수상자(KIWI-XXL에서 84.81점, XCOMET에서 93.78점)를 능가하는 성적입니다.