컨텍스트 벡터 ( 113 ) 를 수신 한 디코더 ( 120 ) 는 초기 입력 으로 문장 의 시작 을 의미 하 는 시작 토큰 ( SOS ; Start - of - sentence ) ( 121 ) 을 수신 할 수 있 다 . 시작 토큰 ( SOS ) ( 121 ) 을 수신 한 디코더 ( 120 ) 는 다음 에 등장 할 확률 이 높 은 토큰 을 예측 할 수 있 다 . 토큰 은 한 시퀀스 를 구성 하 는 단위 로 , 예 를 들 어 단어 ( word ) , 부분 단어 ( subword ) , 글자 ( character ) 단위 일 수 있 다 . 이하 에서 , 설명 의 편의 를 위하 여 토큰 은 단어 단위 인 것 으로 설명 한다 . 첫 번 째 시점 ( time step ) 에서 , 디코더 ( 120 ) 는 다음 에 등장 할 단어 로 ' Hi '( 122 ) 를 예측 할 수 있 다 . 즉 , 디코더 ( 120 ) 는 ' Hi '( 122 ) 를 출력 토큰 으로 결정 하 여 음성 인식 결과 로 출력 할 수 있 다 . ' Hi '( 122 ) 를 출력 토큰 으로 결정 한 디코더 ( 120 ) 는 ' Hi '( 122 ) 를 다음 시점 의 입력 으로 입력 할 수 있 다 . 두 번 째 시점 에서 , 디코더 ( 120 ) 는 입력 된 단어 ' Hi '( 122 ) 로부터 다시 다음 에 올 단어 인 ' Bixby ' 를 예측 할 수 있 다 . 디코더 ( 120 ) 는 또 다시 ' Bixby ' 를 다음 시점 의 입력 으로 입력 할 수 있 다 . 디코더 ( 120 ) 는 이런 식 으로 다음 에 올 단어 를 예측 하 고 , 그 예측 한 단어 를 다음 시점 의 입력 으로 넣 는 행위 를 반복 할 수 있 다 . 이 행위 는 문장 의 끝 을 의미 하 는 종료 토큰 ( EOS ; End - of - sentence ) 이 다음 단어 로 예측 될 때 까지 반복 될 수 있 다 .