We perform a variety of ablations of our model-training in a reduced setting: \(1M\) training examples from the dataset with a maximum sequence length of \(16\), training for \(40\) epochs. Ablation results are shown in Table 9 (Left).
최대 시퀀스 길이가 \(16\)인 데이터 세트의 \(1M\) training examples로, \(40\) epochs 동안 훈련하는 감소된 설정에서 모델 훈련의 다양한 절제술을 수행합니다. 절제 결과는 표 9(왼쪽)에 나와 있습니다.
최대 시퀀스 길이가 \(16\)인 데이터 세트의 \(1M\) 훈련 예제로, \(40\) 에포크 동안 훈련하는 감소된 설정에서 모델 훈련의 다양한 절제술을 수행합니다. 절제 결과는 표 9(왼쪽)에 나와 있습니다.