and train it via language modeling on the true prompt \(x\mid p(x)=v\). For training, we sample outputs from a checkpoint of our conditional LM (section 4) to use as hypotheses. We train the model on outputs from Llama-2 (7B) for \(100\) epochs using the same hyperparameters outlined in Section 6. This model is able to achieve a one-step BLEU score of \(58.7\) on Instructions-2M, essentially recovering the original model's BLEU performance of \(59.2\). However, we see no increase in BLEU score after applying multiple steps of correction; after 5 steps, our model achieves a BLEU score of \(56.43\).
그리고 실제 프롬프트 \(x\mid p(x)=v\)에 대한 language modeling을 통해 학습합니다. 훈련을 위해 조건부 LM(섹션 4)의 체크포인트에서 출력을 샘플링하여 가설로 사용합니다. 섹션 6에 설명된 것과 동일한 하이퍼파라미터를 사용하여 Llama-2(7B)의 출력에 대해 \(100\) 에포크 동안 모델을 훈련합니다. 이 모델은 Instructions-2M에서 1단계 BLEU 점수 \(58.7\)을 달성할 수 있으며, 이는 본질적으로 원래 모델의 BLEU 성능인 \(59.2\)를 회복한 것입니다. 그러나 여러 단계의 수정을 적용한 후에도 BLEU 점수가 증가하지 않는 것을 볼 수 있으며, 5단계 이후에는 모델이 BLEU 점수 \(56.43\)을 달성합니다.
그리고 실제 프롬프트 \(x\mid p(x)=v\)에 대한 언어 모델링을 통해 학습합니다. 훈련을 위해 조건부 LM(섹션 4)의 체크포인트에서 출력을 샘플링하여 가설로 사용합니다. 섹션 6에 설명된 것과 동일한 하이퍼파라미터를 사용하여 Llama-2(7B)의 출력에 대해 \(100\) 에포크 동안 모델을 훈련합니다. 이 모델은 Instructions-2M에서 1단계 BLEU 점수 \(58.7\)을 달성할 수 있으며, 이는 본질적으로 원래 모델의 BLEU 성능인 \(59.2\)를 회복한 것입니다. 그러나 여러 단계의 수정을 적용한 후에도 BLEU 점수가 증가하지 않는 것을 볼 수 있으며, 5단계 이후에는 모델이 BLEU 점수 \(56.43\)을 달성합니다.