Figure 3: Performance at each epoch on InvariantLAMA during continued pretraining in Main, Small, and Small-P1\(\rightarrow\)Small-P2 scenarios. Each marker indicates the result at each continual pretraining epoch.
그림 3: 메인, 스몰, 스몰-P1\(\rightarrow\)스몰-P2 시나리오에서 지속적인 사전 학습 중에 InvariantLAMA에서 각 epoch의 성능. 각 마커는 연속적인 사전 학습 epoch에서의 결과를 나타냅니다.
그림 3: 메인, 스몰, 스몰-P1\(\우측수렴\)스몰-P2 시나리오에서 지속적인 사전 학습 중에 불변LAMA에서 각 에포크의 성능. 각 마커는 연속적인 사전 학습 에포크에서의 결과를 나타냅니다.