또 , 상기 스텝 S 1107 에 있 어서 , 감합 성공 한 경우 의 환경 상태 I 에 대하 여 Actor 부 ( 804 ) 및 Critic 부 ( 803 ) 의 학습 을 행 한다고 하 고 있 지만 , 감합 시행 개시 로부터 성공 까지 모든 시행 때 의 데이터 를 이용 하 여 Actor 부 ( 804 ) 및 Critic 부 ( 803 ) 가 학습 하 더라도 좋 다 . 그 경우 , 실시 의 형태 1 에 있 어서 , 제 어량 에 따라 복수 의 뉴 럴 네트워크 를 형성 하 는 경우 에 대하 여 기재 하 고 있 지만 , 감합 의 성공 의 위치 를 알 수 있 으면 , 감합 성공 까지 의 거리 를 이용 하 여 제 어량 의 크기 에 따른 적절 한 복수 의 뉴 럴 네트워크 를 동시 에 형성 시키 는 것 이 가능 하 게 된다 .