Third, we did not investigate whether the results obtained could be extrapolated to larger model sizes, which we leave to future works. However, our finding that the BPE-SP-33 tokenizer is the best-performing tokenizer for the monolingual setting and the fact that this tokenizer has been used for training state-of-the-art models up to 65B (Touvron et al.) might indicate that our results also transfer to larger model sizes.
셋째, 우리는 얻은 결과를 더 큰 모델 크기로 외삽할 수 있는지 여부를 조사하지 않았으며, 이는 향후 연구로 남겨두었습니다. 그러나 BPE-SP-33 tokenizer가 단일 언어 설정에 가장 성능이 뛰어난 tokenizer라는 사실과 이 tokenizer가 최대 65B(Touvron et al.)의 최첨단 모델 학습에 사용되었다는 사실은 우리의 결과가 더 큰 모델 크기로도 전이될 수 있음을 나타낼 수 있습니다.
셋째, 우리는 얻은 결과를 더 큰 모델 크기로 외삽할 수 있는지 여부를 조사하지 않았으며, 이는 향후 연구로 남겨두었습니다. 그러나 BPE-SP-33 토큰화기가 단일 언어 설정에 가장 성능이 뛰어난 토큰화기라는 사실과 이 토큰화기가 최대 65B(Touvron et al.)의 최첨단 모델 학습에 사용되었다는 사실은 우리의 결과가 더 큰 모델 크기로도 전이될 수 있음을 나타낼 수 있습니다.