Figure 2: Infini-Transformer (top) has an entire context history whereas Transformer-XL (bottom) discards old contexts since it caches the KV states for the last segment only.
Figure 2: Infini-Transformer(위)는 전체 컨텍스트 히스토리를 가지고 있는 반면, Transformer-XL(아래)은 마지막 세그먼트의 KV 상태만 캐시하기 때문에 오래된 컨텍스트를 버립니다.
그림 2: Infini-Transformer(상단)는 전체 컨텍스트 히스토리를 가지고 있는 반면, Transformer-XL(하단)은 마지막 세그먼트에 대한 KV 상태만 캐시하기 때문에 오래된 컨텍스트를 폐기합니다.