Figure 2: Comparison of parity scores between monolingual (English) tokenizer and multilingual tokenizers applied multi-lingual documents.
그림 2: 다국어 문서에 적용된 monolingual (English) tokenizer와 multilingual tokenizer 간의 패리티 점수 비교.
그림 2: 다국어 문서에 적용된 단일 언어(영어) 토큰화기와 다국어 토큰화기 간의 패리티 점수 비교.