그리고 , 제 1 인공지능 모듈 ( 200 ) 은 재생 버퍼 로부터 임의 의 상기 전이 의 미니 배치 를 추출 할 수 있 고 , 추출 된 미니 배치 를 기초 로 목적 배우 신경망 에 다음 상태 를 적용 하 여 행동 을 얻 을 수 있 다 . 이때 , 하 기 의 수학식 14 에 따라 행동 과 미니 배치 의 다음 상태 를 목적 비평가 신경망 에 적용 한 후 , 할인율 을 곱하 고 미니 배치 의 보상 을 더 하 여 행동 가치 의 시간 차 학습 레이블 이 계산 될 수 있 다 .