Figure 3: Evolution of the language modeling performance on the Wikipedia test set from the LM Evaluation Harness (Gao et al., 2023) and last-layer anisotropy of Pythia models along training (color).
그림 3: LM Evaluation Harness(Gao et al., 2023)의 Wikipedia 테스트 세트에 대한 언어 모델링 성능의 진화와 훈련 중 Pythia 모델의 마지막 레이어 이방성(색상).
그림 3: LM 평가 하네스(Gao et al., 2023)의 위키백과 테스트 세트에 대한 언어 모델링 성능의 진화와 훈련 중 Pythia 모델의 마지막 레이어 이방성(색상).