The State Space Model originates from Kalman filtering [35] which mainly introduces a linear filtering and prediction method. Kalman filtering can be divided into two steps, i.e., the prediction and correction step. The prediction is to estimate the current state based on the state of the previous time, and the correction is to estimate the optimal state by integrating the estimated state and the observed state of the current time. The State Space Model is a mathematical model that describes the behavior of a dynamic system using a set of first-order differential equations (continuous-time systems) or difference equations (discrete-time systems) to represent the evolution of the internal state of the system, and another set of equations to describe the relationship between the state and the output of the system. These equations can be expressed in matrix and vector form to deal with multivariable systems. Subsequently, Gu et al. [34] introduces a Linear State Space Layer (LSSL) that combines the advantages of recurrent neural networks (RNNs), temporal convolutional networks, and neural differential equations (NDEs) while addressing their shortcomings in model power and computational efficiency. This new sequence model is inspired by control systems and implemented through the linear state space layer (LSSL).
상태 공간 모델은 주로 선형 필터링 및 예측 방법을 소개하는 Kalman filtering[35]에서 유래했습니다. Kalman filtering은 예측 단계와 보정 단계의 두 단계로 나눌 수 있습니다. 예측은 이전 시간의 상태를 기반으로 현재 상태를 추정하는 것이며, 보정은 추정된 상태와 현재 시간의 관측 상태를 통합하여 최적의 상태를 추정하는 것입니다. 상태 공간 모델은 동적 시스템의 동작을 설명하는 수학적 모델로, 시스템의 내부 상태의 진화를 나타내는 일련의 1차 미분 방정식(연속 시간 시스템) 또는 차이 방정식(불연속 시간 시스템)과 상태와 시스템의 출력 간의 관계를 설명하는 또 다른 방정식으로 구성됩니다. 이러한 방정식은 행렬과 벡터 형식으로 표현하여 다변수 시스템을 처리할 수 있습니다. 이어서 Gu 등[34]은 순환 신경망(RNN), temporal convolutional networks, neural differential equations (NDE)의 장점을 결합하면서 모델 성능과 계산 효율성의 단점을 해결한 Linear State Space Layer (LSSL)을 소개했습니다. 이 새로운 시퀀스 모델은 제어 시스템에서 영감을 얻어 Linear State Space Layer (LSSL)을 통해 구현되었습니다.
상태 공간 모델은 주로 선형 필터링 및 예측 방법을 소개하는 칼만 필터링[35]에서 유래했습니다. 칼만 필터링은 예측 단계와 보정 단계의 두 단계로 나눌 수 있습니다. 예측은 이전 시간의 상태를 기반으로 현재 상태를 추정하는 것이며, 보정은 추정된 상태와 현재 시간의 관측 상태를 통합하여 최적의 상태를 추정하는 것입니다. 상태 공간 모델은 동적 시스템의 동작을 설명하는 수학적 모델로, 시스템의 내부 상태의 진화를 나타내는 일련의 1차 미분 방정식(연속 시간 시스템) 또는 차이 방정식(불연속 시간 시스템)과 상태와 시스템의 출력 간의 관계를 설명하는 또 다른 방정식으로 구성됩니다. 이러한 방정식은 행렬과 벡터 형식으로 표현하여 다변수 시스템을 처리할 수 있습니다. 이어서 Gu 등[34]은 순환 신경망(RNN), 시간적 컨볼루션 네트워크, 신경 미분 방정식(NDE)의 장점을 결합하면서 모델 성능과 계산 효율성의 단점을 해결한 선형 상태 공간 계층(LSSL)을 소개했습니다. 이 새로운 시퀀스 모델은 제어 시스템에서 영감을 얻어 선형 상태 공간 계층(LSSL)을 통해 구현되었습니다.