**Result 12** (Figure 8(g)+8(h)).: When 7/8 of training tokens are from junk (i.e., bioS(\(N^{\prime}\)) for \(N^{\prime}=100M\)), adding a special token at the start of every useful data greatly improves capacity ratio:
**Result 12** (Figure 8(g)+8(h)).: 훈련 토큰의 7/8이 쓸모없는 데이터(즉, \(N^{\prime}=100M\)인 bioS(\(N^{\prime}\)))일 때, 유용한 데이터의 시작 부분에 특수 토큰을 추가하면 용량 비율이 크게 향상됩니다:
**결과 12**(그림 8(g)+8(h)).: 훈련 토큰의 7/8이 정크에서 유래한 경우(즉, \(N^{\프라임}=100M\)에 대한 bioS(\(N^{\프라임}\))의 경우), 유용한 데이터의 시작 부분에 특수 토큰을 추가하면 용량 비율이 크게 향상됩니다: