The proofs are straightforward and we defer them to Appendix A.5. The first lemma is a well-known under-specification issue with the Plackett-Luce family of models [30]. Due to this under-specification,we usually have to impose additional identifiability constraints to achieve any guarantees on the MLE estimates from Eq. 2[4]. The second lemma states that all reward functions from the same class yield the same optimal policy, hence for our final objective, we are only interested in recovering an arbitrary reward function from the optimal class.
증명은 간단하므로 부록 A.5로 넘깁니다. 첫 번째 정리는 Plackett-Luce 모델 제품군 [30]의 잘 알려진 과소 사양 문제입니다. 이러한 과소 사양으로 인해 일반적으로 식 2[4]에서 MLE 추정치에 대한 보장을 얻기 위해 추가 식별 가능성 제약을 부과해야 합니다. 두 번째 정리는 동일한 클래스의 모든 보상 함수가 동일한 최적의 정책을 산출하므로 최종 목표에서는 최적의 클래스에서 임의의 보상 함수를 복구하는 데만 관심이 있습니다.
증명은 간단하므로 부록 A.5로 넘깁니다. 첫 번째 정리는 플래킷-루스 모델 제품군 [30]의 잘 알려진 과소 사양 문제입니다. 이러한 과소 사양으로 인해 일반적으로 식 2[4]에서 MLE 추정치에 대한 보장을 얻기 위해 추가 식별 가능성 제약을 부과해야 합니다. 두 번째 정리는 동일한 클래스의 모든 보상 함수가 동일한 최적의 정책을 산출하므로 최종 목표에서는 최적의 클래스에서 임의의 보상 함수를 복구하는 데만 관심이 있습니다.