At this moment, we get the complete SSM model that can realize the parallelism of training and is suitable for the recurrent form of linear complexity of inference. In the Transformer architecture, the context information is stored in the similarity matrix, however, the SSM doesn't have a similar module which makes it perform poorly in contextual learning.
이 순간, 우리는 훈련의 병렬성을 실현할 수 있고 추론의 선형 복잡성의 반복 형태에 적합한 완전한 SSM 모델을 얻습니다. Transformer 아키텍처에서 context 정보는 similarity matrix에 저장되지만 SSM에는 유사한 모듈이 없어 contextual learning에 부진한 성능을 발휘합니다.
이 순간, 우리는 훈련의 병렬성을 실현할 수 있고 추론의 선형 복잡성의 반복 형태에 적합한 완전한 SSM 모델을 얻습니다. 트랜스포머 아키텍처에서 컨텍스트 정보는 유사도 행렬에 저장되지만 SSM에는 유사한 모듈이 없어 문맥 학습에 부진한 성능을 발휘합니다.