The new memory states \(M_{\text{s}}\) and \(z_{\text{s}}\) are then passed to the next segment \(S+1\), building in a recurrence in each attention layer. The right side term \(\sigma(K)^{T}V\) in Eq. (4) is known as an associative binding operator (Smolensky, 1990; Hebb, 2005; Schlag et al., 2020).
새로운 메모리 상태 \(M_{\text{s}}\)와 \(z_{\text{s}}\)는 다음 세그먼트 \(S+1\)로 전달되어 각 어텐션 레이어에서 반복성을 구축합니다. 식 (4)의 오른쪽 항 \(\sigma(K)^{T}V\)는 연관 결합 연산자(associative binding operator)로 알려져 있습니다 (Smolensky, 1990; Hebb, 2005; Schlag et al., 2020).
그런 다음 새로운 메모리 상태 \(M_{\text{s}}\) 및 \(z_{\text{s}}\)는 다음 세그먼트 \(S+1\)로 전달되어 각 주의 계층에서 반복을 구축합니다. 방정식 (4)의 오른쪽 항 \(\sigma(K)^{T}V\)는 연상적 바인딩 연산자(Smolensky, 1990; Hebb, 2005; Schlag et al., 2020)로 알려져 있습니다.