Footnote 26: The influence of the tokenizer on model capacity is noteworthy. For instance, LLaMA/Mistral tokenizers tend to split birthday years into single-digit tokens, slightly slowing the training of smaller models, whereas the GPT2Tokenizer uses a single token for the birth years such as 1991.
각주 26: Tokenizer가 모델 용량에 미치는 영향은 주목할 만합니다. 예를 들어, LLaMA/Mistral Tokenizer는 생년월일을 한 자리 Token으로 분할하는 경향이 있어 소형 모델의 학습 속도가 약간 느려지는 반면, GPT2Tokenizer는 1991년과 같은 생년월일에 대해 단일 Token을 사용합니다.
각주 26: 토큰화가 모델 용량에 미치는 영향은 주목할 만합니다. 예를 들어, LLaMA/Mistral 토큰화는 생년월일을 한 자리 토큰으로 분할하는 경향이 있어 소형 모델의 학습 속도가 약간 느려지는 반면, GPT2Tokenizer는 1991년과 같은 생년월일에 대해 단일 토큰을 사용합니다.