A final reward score for model training is the summation of \(R_{aspect}\) and \(R_{taskAcc}\). Following Stiennon et al. (2020), we also incorporate penalties based on the Kullback Leibler (KL) divergence between the learned policy LM and \(M^{S}\).
모델 학습을 위한 최종 보상 점수는 \(R_{aspect}\)와 \(R_{taskAcc}\)의 합계입니다. Stiennon 등(2020)에 따라 학습된 정책 LM과 \(M^{S}\) 사이의 Kullback Leibler (KL) 발산을 기반으로 한 페널티도 통합합니다.
모델 학습을 위한 최종 보상 점수는 \(R_{aspect}\)와 \(R_{taskAcc}\)의 합계입니다. Stiennon 등(2020)에 따라 학습된 정책 LM과 \(M^{S}\) 사이의 쿨백 라이블러(KL) 발산을 기반으로 한 페널티도 통합합니다.