순환 신경망 ( Recurrent Neural Networks ; RNN ) 기반 의 깊 은 신경망 ( Deep Neural Networks ; 심층 신경망 ) 은 음성 인식 , 자연 언어 처리 등 순차 적 인 데이터 를 처리 하 는 데 큰 성공 을 가져왔 다 . 최근 순환 신경망 인코더 - 디코더 모델 ( seq 2 seq ) 이 제안 되 었 는데 이 모델 은 기계 번역 에서 뛰어난 성능 을 보였 다 . 그 뿐 만 아니 라 , seq 2 seq 모델 은 약간 의 수정 을 거쳐 QA 대화 모델 로 도 사용 되 었 다 .