**Why do we add parameters to only the encoder for T5?** For parameter-expansion methods, we add parameters to only the encoder because the encoder is applied to the input sequence and the decoder is applied to the output sequence. Since most of the computational cost comes from the decoder computing for the output sequence in an auto-regressive manner as highlighted in (Li et al., 2021), the newly added parameters in the encoder are roughly expected to have minimal additional computational cost.
**T5의 Encoder에만 매개변수를 추가하는 이유는 무엇인가요?** 매개변수 확장 방법의 경우 Encoder는 입력 시퀀스에 적용되고 Decoder는 출력 시퀀스에 적용되므로 Encoder에만 매개변수를 추가합니다. (Li et al., 2021)에서 강조한 바와 같이 대부분의 계산 비용이 auto-regressive 방식으로 출력 시퀀스에 대해 Decoder가 계산하는 데서 발생하기 때문에 Encoder에 새로 추가된 매개변수는 대략적인 추가 계산 비용이 최소화될 것으로 예상됩니다.
**T5의 인코더에만 매개변수를 추가하는 이유는 무엇인가요?** 매개변수 확장 방법의 경우 인코더는 입력 시퀀스에 적용되고 디코더는 출력 시퀀스에 적용되므로 인코더에만 매개변수를 추가합니다. (Li et al., 2021)에서 강조한 바와 같이 대부분의 계산 비용이 자동 회귀 방식으로 출력 시퀀스에 대해 디코더가 계산하는 데서 발생하기 때문에 인코더에 새로 추가된 매개변수는 대략적인 추가 계산 비용이 최소화될 것으로 예상됩니다.