In Sections C.3-C.6 we can no longer use general invertible matrices \(\mathbf{S}\) in our arguments, and must instead use orthogonal matrices, matrices \(\mathbf{U}\) such that \(\mathbf{U}^{\top}\mathbf{U}=I\). In models with LayerNorm, we specialise further, too (Appendix C.5).
섹션 C.3-C.6에서는 더 이상 일반적인 가역 행렬 \(\mathbf{S}\)를 사용할 수 없으며, 대신 직교 행렬 \(\mathbf{U}\)를 사용해야 합니다. 직교 행렬은 \(\mathbf{U}^{\top}\mathbf{U}=I\)를 만족하는 행렬입니다. LayerNorm이 포함된 모델에서는 추가로 특수화합니다 (부록 C.5 참조).
섹션 C.3-C.6에서는 더 이상 일반적인 반전 가능 행렬(\mathbf{S}\)을 인수에 사용할 수 없으며, 대신 직교 행렬, 행렬(\mathbf{U}^{\top}\mathbf{U}=I\)를 사용해야 합니다. LayerNorm이 있는 모델에서는 더 특수화됩니다(부록 C.5).