\(\bullet\)_Basis truncation._ Similar to the base modification, the truncation of the basis also concentrates on dealing with the singular dimensions with wavelengths exceeding the training length [293]. According to the definition \(\lambda_{i}=2\pi/\theta_{i}\) in Equation 5, the dimension with a large wavelength \(\lambda_{i}\) has a small basis \(\theta_{i}\) accordingly. Based on this observation, this approach first defines a basis range \([a,c]\). Given the basis range, the value of basis is modified according to the following ways: (1) when \(\theta_{i}\geq c\), the value is retained, (2) when \(\theta_{i}\leq a\), the value is set to zero, and (3) when \(a<\theta_{i}<c\), the value is truncated to a fixed small value. Via basis truncation, the out-of-distribution rotation angles can be avoided at larger position indices. However, this approach does not perform very well at long context tasks [293].
\(\bullet\)_Basis truncation._ 기저 수정과 유사하게, 기저의 truncation도 훈련 길이를 초과하는 파장을 가진 특이한 차원을 처리하는 데 중점을 둡니다[293]. 식 5의 정의에 따르면 파장이 큰 차원 \(\lambda_{i}\)는 그에 따라 작은 기저 \(\theta_{i}\)를 갖습니다. 이 관찰을 바탕으로 이 접근법은 먼저 기저 범위 \([a,c]\)를 정의합니다. 기저 범위가 주어지면 기저 값은 다음과 같은 방법에 따라 수정됩니다: (1) \(\theta_{i}\geq c\)일 때, 값은 유지되고, (2) \(\theta_{i}\leq a\)일 때, 값은 0으로 설정되며, (3) \(a<\theta_{i}<c\)일 때, 값은 고정된 작은 값으로 잘립니다. Basis truncation을 통해 더 큰 위치 인덱스에서 분포 밖 회전 각도를 피할 수 있습니다. 그러나 이 접근 방식은 긴 컨텍스트 작업에서 그다지 잘 수행되지 않습니다[293].
\(\bullet\)_기저 절단._ 기저 수정과 유사하게, 기저의 절단도 훈련 길이를 초과하는 파장을 가진 특이한 차원을 처리하는 데 중점을 둡니다[293]. 식 5의 정의에 따르면 파장이 큰 차원 \(\lambda_{i}\)는 그에 따라 작은 기저 \(\theta_{i}\)를 갖습니다. 이 관찰을 바탕으로 이 접근법은 먼저 기저 범위 \([a,c]\)를 정의합니다. 기저 범위가 주어지면 기저 값은 다음과 같은 방법에 따라 수정됩니다: (1) \(\theta_{i}\geq c\)일 때, 값은 유지되고, (2) \(\theta_{i}\leq a\)일 때, 값은 0으로 설정되며, (3) \(a<\theta_{i}<c\)일 때, 값은 고정된 작은 값으로 잘립니다. 기저 절단을 통해 더 큰 위치 인덱스에서 분포 밖 회전 각도를 피할 수 있습니다. 그러나 이 접근 방식은 긴 컨텍스트 작업에서 그다지 잘 수행되지 않습니다[293].