Scaling inverter.We train inverter models of varying size to see the effect of model scale on inversion performance. We note that the number of parameters in the inverter has a very large impact; with larger inverter models performing significantly better: under ablation settings, with the same number of training steps, the T5-large inverter achieves \(24\%\) higher BLEU score than T5-small. This finding indicates that we may more accurately invert language models simply by scaling our system.
스케일링 인버터. 우리는 인버터 모델의 크기를 다양하게 조정하여 모델 스케일이 인버전 성능에 미치는 영향을 확인합니다. 인버터의 파라미터 수가 매우 큰 영향을 미친다는 점을 주목합니다. 더 큰 인버터 모델이 훨씬 더 좋은 성능을 보이며, 동일한 학습 단계 수에서 T5-large 인버터는 T5-small보다 \(24\%\) 더 높은 BLEU 점수를 달성합니다. 이 발견은 단순히 시스템을 스케일링함으로써 언어 모델을 더 정확하게 인버트할 수 있음을 시사합니다.
스케일링 인버터. 다양한 크기의 인버터 모델을 학습시켜 모델 규모가 반전 성능에 미치는 영향을 확인합니다. 인버터의 파라미터 수가 매우 큰 영향을 미치며, 더 큰 인버터 모델이 훨씬 더 우수한 성능을 발휘합니다. 절제 설정에서 동일한 수의 훈련 단계가 있는 경우 T5-large 인버터는 T5-small보다 \(24\%\) 더 높은 BLEU 점수를 달성합니다. 이 결과는 단순히 시스템을 확장함으로써 언어 모델을 더 정확하게 반전시킬 수 있음을 나타냅니다.