Figure 7: \(W\)-error as \(d\) increases, for different tokenizers and datasets. We observe that while W-error can be halved using 1000 or 2000 dimensions, it only becomes negligible after 10,000-15,000 dimensions.
Figure 7: 서로 다른 토크나이저와 데이터셋에 대해 \(d\)가 증가함에 따른 \(W\)-오류. 1000 또는 2000 차원을 사용하면 \(W\)-오류를 절반으로 줄일 수 있지만, 10,000-15,000 차원 이후에야 비로소 무시할 수 있는 수준이 됩니다.
그림 7: 다양한 토큰화 도구와 데이터 세트에 대해 \(d\)가 증가함에 따라 \(W\)-오류. W-오류는 1000 또는 2000 차원을 사용하여 절반으로 줄일 수 있지만 10,000-15,000 차원 이후에만 무시할 수 있는 수준이 된다는 것을 관찰할 수 있습니다.