도 4 에 도시 된 바 와 같이 , 심층 강화 학습 모델 ( 110 ) 의 학습 에 따라 약 2 , 000 회 이후 에 는 실험 상 의 잡음 에 의한 약간 의 변화 를 제외 하 고 , 다운로드 시간 이 40 초 부근 에서 학습 횟수 ( Epoch 수 ) 가 유지 되 는 양상 을 확인 할 수 있 으며 , 이 를 통해 심층 강화 학습 모델 ( 110 ) 에 기반 하 여 패킷 스케줄 러 ( 220 ) 가 가공 되 지 않 은 네트워크 상태 의 데이터 를 기반 으로 자율 적 으로 성능 이 향상 되 는 방향 으로 모델 을 갱신 해 나가 는 것 을 알 수 있 다 .