마르코프 결정 프로세스 모델 은 현재 상태 , 예상 되 는 미래 상태 들 , 또는 둘 다와 같 은 대응 상태 들 과 함께 , 현재 의 시간 적 위치 , 장래 의 시간 적 위치 또는 둘 다와 같 은 시간 적 위치 들 의 시퀀스 로서 별개 의 차량 운용 시나리오 를 모델링 할 수 있 다 . 각각 의 시간 적 위치 에서 , 모델 은 예상 상태 일 수 있 고 하나 이상 의 후보 차량 제어 액션 에 연관 될 수 있 는 상태 를 가질 수 있 다 . 모델 은 자율 주행 차량 을 에이전트 로서 표현 할 수 있 으며 , 이 는 현재 상태 에 대한 식별 된 액션 , 및 식별 된 액션 이 상태 를 현재 상태 로부터 후속 상태 로 전이 시킬 확률 에 따라 , 하나 의 상태 ( 현재 상태 ) 로부터 다른 상태 ( 후속 상태 ) 로 시간 적 위치 들 의 시퀀스 를 따라 전이 할 수 있 다 .