Figure 9 visualizes how the EM scores of each task change as T5-Kadapters, the CKL method with the most robust performance, and T5-Vanilla are continually pretrained on \(D_{1}\). In all of the tasks, the performance of T5-Initial can be considered as the upper-bound for IL and lower-bound for UL, NL, NLE. Corresponding with our main observations, CKL allows considerable retention of _time-invariant_ world knowledge while improving updating and gaining new world knowledge compared to T5-Vanilla, mitigating the overall trade-off.
그림 9는 T5-Kadapters, 가장 강력한 성능을 가진 CKL 방법, T5-Vanilla가 \(D_{1}\)에 대해 지속적으로 pretrained함에 따라 각 작업의 EM 점수가 어떻게 변화하는지를 시각화한 것입니다. 모든 작업에서 T5-Initial의 성능은 IL의 상한선 및 UL, NL, NLE의 하한선으로 간주할 수 있습니다. 주요 관찰 결과에 해당하여, CKL은 T5-Vanilla에 비해 업데이트 및 새로운 세계 지식 습득을 개선하면서 _time-invariant_ 세계 지식을 상당히 유지할 수 있으므로 전체적인 trade-off를 완화할 수 있습니다.
그림 9는 T5-K어댑터, 가장 강력한 성능을 가진 CKL 방법, T5-바닐라가 \(D_{1}\)에 대해 지속적으로 사전 학습함에 따라 각 작업의 EM 점수가 어떻게 변화하는지를 시각화한 것입니다. 모든 작업에서 T5-Initial의 성능은 IL의 상한선 및 UL, NL, NLE의 하한선으로 간주할 수 있습니다. 주요 관찰 결과에 해당하여, CKL은 T5-Vanilla에 비해 업데이트 및 새로운 세계 지식 습득을 개선하면서 _시간 불변_ 세계 지식을 상당히 유지할 수 있으므로 전체적인 트레이드 오프를 완화할 수 있습니다.