**Relation to RL Fine-Tuning.** Our method can be regarded as a special case of Eq. (3) with the following assumption: 1) We relax the reward computation in Eq. (3) and assume that every token in the ground-truth data can provide a positive process reward. 2) Sampling masked position has a similar effect with sampling new paths.
**Relation to RL Fine-Tuning.** 우리의 방법은 다음과 같은 가정을 통해 Eq. (3)의 특수한 경우로 간주할 수 있습니다: 1) 방정식 (3)의 보상 계산을 완화하고 지상 실측 데이터의 모든 토큰이 긍정적인 프로세스 보상을 제공할 수 있다고 가정합니다. 2) 마스킹된 위치를 샘플링하는 것은 새로운 경로를 샘플링하는 것과 유사한 효과가 있습니다.
**RL 미세 조정과의 관계.** 우리의 방법은 다음과 같은 가정을 통해 Eq. (3)의 특수한 경우로 간주할 수 있습니다: 1) 방정식 (3)의 보상 계산을 완화하고 지상 실측 데이터의 모든 토큰이 긍정적인 프로세스 보상을 제공할 수 있다고 가정합니다. 2) 마스킹된 위치를 샘플링하는 것은 새로운 경로를 샘플링하는 것과 유사한 효과가 있습니다.