XLMs [47] extended BERT to cross-lingual language models using two methods: (1) a unsupervised method that only relies on monolingual data, and (2) a supervised method that leverages parallel data with a new cross-lingual language model objective, as illustrated in Fig 5. XLMs had obtained state-of-the-art results on cross-lingual classification, unsupervised and supervised machine translation, at the time they were proposed.
XLMs [47]는 두 가지 방법을 사용하여 BERT를 언어 간 언어 모델로 확장했습니다: (1) 단일 언어 데이터에만 의존하는 unsupervised 방법과 (2) 그림 5와 같이 새로운 cross-lingual language model objective를 사용하여 병렬 데이터를 활용하는 supervised 방법. XLMs는 제안 당시 cross-lingual classification, unsupervised 및 supervised machine translation 분야에서 state-of-the-art 결과를 얻었습니다.
XLMs [47]는 두 가지 방법을 사용하여 BERT를 언어 간 언어 모델로 확장했습니다: (1) 단일 언어 데이터에만 의존하는 비지도 방법과 (2) 그림 5와 같이 새로운 언어 간 언어 모델 목표를 사용하여 병렬 데이터를 활용하는 지도 방법. XLMs는 제안 당시 언어 간 분류, 비지도 및 지도 기계 번역 분야에서 최첨단 결과를 얻었습니다.