**Modular** is a newly proposed parameter-expansion method specifically for encoder-decoder models which freezes the original, pretrained encoder while adding a new, randomly initialized encoder that is updated during continued pretraining. For the newly added encoder, we vary the size to _T5-small_ while keeping the size of the original encoder and decoder to be _T5-large_.
**Modular**은 Encoder-Decoder 모델을 위한 새로운 매개변수 확장 방법으로, 미리 학습된 원래 Encoder를 동결한 채에 계속 학습하는 동안 업데이트되는 무작위로 초기화된 새로운 Encoder를 추가하는 방식입니다. 새로 추가된 Encoder의 경우 원래 Encoder와 Decoder의 크기를 _T5-large_로 유지하면서 크기를 _T5-small_로 변경합니다.
**모듈형**은 인코더-디코더 모델을 위한 새로운 매개변수 확장 방법으로, 미리 학습된 원래 인코더를 동결한 채에 계속 학습하는 동안 업데이트되는 무작위로 초기화된 새로운 인코더를 추가하는 방식입니다. 새로 추가된 인코더의 경우 원래 인코더와 디코더의 크기를 _T5-large_로 유지하면서 크기를 _T5-small_로 변경합니다.