마르코프 결정 프로세스 모델 은 상태 들 의 세트 , 액션 들 의 세트 , 상태 전이 확률 들 의 세트 , 보상 함수 , 또는 이 들 의 조합 을 사용 하 여 별개 의 차량 운용 시나리오 를 모델링 할 수 있 다 . 일부 실시 예 들 에서 , 별개 의 차량 운용 시나리오 를 모델링 하 는 것 은 후속 하 는 시간 주기 들 에 적용 되 는 보상 함수 의 출력 을 조절 하 거나 디스카운트 할 수 있 는 디스카운트 계수 를 이용 하 는 것 을 포함 할 수 있 다 .