Figure 4: **Forward Pass and Teacher Forcing**. We visualize a single forward pass of our algorithm. Solid lines denote language model computation, while dashed lines indicate tokens are inserted via teacher forcing, and the mixer represents the mixing head. In particular, we visualize predicting three tokens ahead. Thought generation is shown in more detail in Figure 1 and Figure 3.
그림 4: **Forward Pass 및 Teacher Forcing**. 알고리즘의 단일 forward pass를 시각화합니다. 실선은 language model 계산을 나타내고 점선은 teacher forcing을 통해 토큰이 삽입되는 것을 나타내며, 믹서는 mixing head를 나타냅니다. 특히 세 개의 토큰을 앞당겨 예측하는 것을 시각화합니다. 사고 생성은 그림 1과 그림 3에서 더 자세히 보여줍니다.
그림 4: **포워드 패스 및 교사 강제**. 알고리즘의 단일 포워드 패스를 시각화합니다. 실선은 언어 모델 계산을 나타내고 점선은 교사 강제를 통해 토큰이 삽입되는 것을 나타내며, 믹서는 믹싱 헤드를 나타냅니다. 특히 세 개의 토큰을 앞당겨 예측하는 것을 시각화합니다. 사고 생성은 그림 1과 그림 3에서 더 자세히 보여줍니다.