Fig. 6: Overview of unified LM pre-training. The model parameters are shared across the LM objectives (i.e., bidirectional LM, unidirectional LM, and sequence-to-sequence LM). Courtesy of [49].
그림 6: 통합 LM pre-training 개요. 모델 파라미터는 LM objective (즉, bidirectional LM, unidirectional LM 및 sequence-to-sequence LM)에 걸쳐 공유됩니다. [49]의 덕분입니다.
그림 6: 통합 LM 사전 학습 개요. 모델 파라미터는 LM 목표(즉, 양방향 LM, 단방향 LM 및 시퀀스 대 시퀀스 LM)에 걸쳐 공유됩니다. [49]의 덕분입니다.