We found it useful to exclude the negative reward from the REINFORCE loss term, as it led to more stable training, though it may introduce some bias.
우리는 REINFORCE 손실 항에서 부정적 보상을 제외하는 것이 유용하다는 것을 발견했습니다. 이는 더 안정적인 훈련을 가능하게 했지만, 약간의 편향을 초래할 수 있습니다.
우리는 약간의 편향성을 유발할 수 있지만, 보다 안정적인 훈련으로 이어지기 때문에 REINFORCE 손실 항목에서 음의 보상을 제외하는 것이 유용하다는 것을 발견했다.