Performance of the Critic \(\mathcal{C}\).We evaluate the accuracy of reward predictions by splitting GPT-4 generated feedback into training, development, and test sets. The accuracy of the reward model is as follows. Table 5 shows the model performance of predicting GPT-4 judgments. As you can see, overall our fine-tuned reward model shows high prediction matching with GPT-4 predicted feedback.
비평가의 성능 \(\mathcal{C}\). 보상 예측의 정확도를 평가하기 위해 GPT-4가 생성한 피드백을 훈련, 개발 및 테스트 세트로 분할합니다. 보상 모델의 정확도는 다음과 같습니다. 표 5는 GPT-4 판단을 예측하는 모델 성능을 보여줍니다. 보시다시피, 전체적으로 Fine-tuned 보상 모델은 GPT-4가 예측한 피드백과 높은 예측 일치도를 보여줍니다.
비평가의 성능 \mathcal{C}\). 보상 예측의 정확도를 평가하기 위해 GPT-4가 생성한 피드백을 훈련, 개발 및 테스트 세트로 분할합니다. 보상 모델의 정확도는 다음과 같습니다. 표 5는 GPT-4 판단을 예측하는 모델 성능을 보여줍니다. 보시다시피, 전체적으로 미세 조정된 보상 모델은 GPT-4가 예측한 피드백과 높은 예측 일치도를 보여줍니다.