Now that we have the probability of human preference data in terms of the optimal policy rather than the reward model, we can formulate a maximum likelihood objective for a parametrized policy \(\pi_{\theta}\).
이제 보상 모델이 아닌 최적의 정책 측면에서 인간 선호도 데이터의 확률을 얻었으므로 매개변수화된 정책(\(\pi_{\theta}\))에 대한 maximum likelihood objective를 공식화할 수 있습니다.
이제 보상 모델이 아닌 최적의 정책 측면에서 인간 선호도 데이터의 확률을 얻었으므로 매개변수화된 정책(\pi_{\theta}\)에 대한 최대 우도 목적을 공식화할 수 있습니다.