**Gating score visualization.** Figure 3 visualizes the gating score, _sigmoid_(\(\beta\)) for the compressive memory for all attention heads in each layer.
**Gating score 시각화**. 그림 3은 각 레이어의 모든 attention 헤드에 대한 압축 메모리에 대한 gating score, _sigmoid_(\(\beta\))를 시각화합니다.
**게이팅 점수 시각화**. 그림 3은 각 레이어의 모든 주의 헤드에 대한 압축 메모리에 대한 게이팅 점수, _시그모이드_(\(\베타\))를 시각화합니다.