**LoRA**(Hu et al., 2021) We only freeze the encoder for the encoder-decoder LM and the entire model for the decoder-only LM. We use the optimal rank \(r\) of 4 and adapt both \(W_{q}\) and \(W_{v}\) in the self-attention module, which corresponds to the best performing hyperparameter setting in the paper.
**LoRA**(Hu et al., 2021) 인코더-디코더 LM의 경우 인코더만 얼라인드하고 디코더 전용 LM의 경우 전체 모델을 얼라인드합니다. 최적의 순위 \(r\) 4를 사용하고 self-attention 모듈의 \(W_{q}\)와 \(W_{v}\)를 모두 조정하며, 이는 논문에서 가장 성능이 좋은 하이퍼파라미터 설정에 해당합니다.
**LoRA**(Hu et al., 2021) 인코더-디코더 LM의 경우 인코더만 얼라인드하고 디코더 전용 LM의 경우 전체 모델을 얼라인드합니다. 최적의 순위 \(r\) 4를 사용하고 자기 주의 모듈의 \(W_{q}\)와 \(W_{v}\)를 모두 조정하며, 이는 논문에서 가장 성능이 좋은 하이퍼파라미터 설정에 해당합니다.