**SoTA Models** In this category, our benchmarks are established against, to the best of our knowledge, the strongest publicly available translation models. We first compare with **ALMA-13B-LoRA**, recognized as one of the top moderate-size language-model based translation systems, surpassing notable conventional models such as NLLB-54B in both WMT'21 and WMT'22. We also compare our results with **TowerInstruct5**, a recently released LLM-based translation model and a contemporary work in the field.6 Additionally, we evaluate against the zero-shot performance of the latest **GPT-4** (gpt-4-1106-preview), currently shown to be the best translation model among all LLM-based translation systems (Xu et al., 2023; Zhang et al., 2023; Zeng et al., 2023; Jiao et al., 2023).
**SoTA Models** 이 범주에서, 우리의 벤치마크는 우리가 알고 있는 한 가장 강력한 공개 번역 모델들과 비교됩니다. 먼저, WMT'21과 WMT'22에서 NLLB-54B와 같은 주목할 만한 기존 모델들을 능가하는 중간 크기 언어 모델 기반 번역 시스템 중 하나로 인정받는 **ALMA-13B-LoRA**와 비교합니다. 또한, 최근에 출시된 LLM 기반 번역 모델이자 이 분야의 현대적인 작업인 **TowerInstruct5**와 우리의 결과를 비교합니다.6 추가로, 현재 모든 LLM 기반 번역 시스템 중 최고의 번역 모델로 입증된 최신 **GPT-4** (gpt-4-1106-preview)의 제로샷 성능과도 평가합니다 (Xu et al., 2023; Zhang et al., 2023; Zeng et al., 2023; Jiao et al., 2023).
**SoTA 모델** 이 범주에서는 우리의 벤치마크가, 우리가 아는 한, 공개적으로 사용 가능한 가장 강력한 번역 모델에 대해 수립되었습니다. 먼저 WMT'21과 WMT'22에서 모두 NLLB-54B와 같은 주목할 만한 기존 모델을 능가하는 최고의 중간 규모 언어 모델 기반 번역 시스템 중 하나로 인정받는 **ALMA-13B-LoRA**와 비교합니다. 또한 최근에 출시된 LLM 기반 번역 모델이자 이 분야의 동시대 작품인 **TowerInstruct5**와의 결과를 비교합니다.6 또한 현재 모든 LLM 기반 번역 시스템 중 최고의 번역 모델로 밝혀진 최신 **GPT-4**(gpt-4-1106-preview)의 제로샷 성능과 비교합니다(Xu et al., 2023; Zhang et al., 2023; Zeng et al., 2023; Jiao et al., 2023).