도 5 는 pursuit 시뮬레이션 환경 은 2 D 그리드 환경 에서 N 명의 pursuers 가 모든 evaders 를 잡 는 게임 이 다 . Evader 는 벽 과 pursuers 로 4 면 이 둘러 쌓이 면 잡히 게 된다 . Pursuers 와 evaders 는 복수 개 의 행동 ( 예 를 들 면 , 좌 , 우 , 위 , 아래 , 정지 총 5 개 의 행동 ) 을 가지 고 있 으며 evader 은 매 시간 마다 복수 개 의 행동 중 랜덤 으로 선택 하 여 행동 할 수 있 다 . Pursuers 는 매 시간 마다 기 설정 된 크기 ( 예 를 들 면 , - 0 . 05 ) 만큼 의 보상 을 받 으며 벽 에 부딪힐 때 마다 기 설정 된 크기 ( 예 를 들 면 , - 0 . 5 ) 의 보상 을 받 을 수 있 다 . 그리고 evader 를 잡 았 을 때 기 설정 된 크기 ( 예 를 들 면 , 5 ) 의 보상 을 받 을 수 있 다 . 각 에이전트 는