where \(Z(x)=\sum_{y}\pi_{\text{ref}}(y|x)\exp\left(\frac{1}{\beta}r(x,y)\right)\) (notice that \(Z(x)\) also depends on the reward function \(r\)).
여기서 \(Z(x)=\sum_{y}\pi_{\text{ref}}(y|x)\exp\left(\frac{1}{\beta}r(x,y)\right)\) (보상 함수 \(r\)에 따라 \(Z(x)\)도 달라진다는 점에 주목하십시오).
여기서 \(Z(x)=\sum_{y}\pi_{\text{ref}}(y|x)\exp\left(\frac{1}{\beta}r(x,y)\right)\)(Z(x)는 보상 함수 \(r)에도 의존한다는 점에 유의하세요.