feedback (RLHF) based on the base model. The weights of these models are denoted as \(\theta_{PLM}\) and \(\theta_{chat}\), respectively, where \(\theta_{PLM},\theta_{chat}\in\mathbb{R}^{d}\), and \(d\) is the number of parameters.
기본 모델을 기반으로 한 피드백 (RLHF). 이 모델들의 가중치는 각각 \(\theta_{PLM}\) 및 \(\theta_{chat}\)로 표시되며, 여기서 \(\theta_{PLM}, \theta_{chat}\in\mathbb{R}^{d}\)이고, \(d\)는 파라미터의 수입니다.
베이스 모델을 기반으로 피드백(RLHF)을 수행합니다. 이러한 모델의 가중치는 각각 \(\theta_{PLM}\) 및 \(\theta_{chat}\)로 표시되며, 여기서 \(\theta_{PLM},\theta_{chat}\in\mathbb{R}^{d}\), \(d\)는 파라미터의 수입니다.