Table 12 shows the prediction results of T5-Vanilla and T5-Modular on three knowledge probing tasks: InvariantLAMA, UpdatedLAMA, and NewLAMA. We show the prediction for every training epoch for each model. The instances are selected from the predictions that T5-Modular got correct but T5-Initial got wrong on the final prediction, in order to see where the gap of the EM comes from.
Table 12는 세 가지 지식 탐색 작업(InvariantLAMA, UpdatedLAMA, NewLAMA)에서 T5-Vanilla와 T5-Modular의 예측 결과를 보여줍니다. 각 모델의 매 훈련 에포크마다 예측 결과를 제시합니다. EM의 차이가 어디서 발생하는지 확인하기 위해, 최종 예측에서 T5-Modular는 맞췄지만 T5-Initial은 틀린 예측에서 인스턴스를 선택했습니다.
표 12는 세 가지 지식 탐색 작업(InvariantLAMA, UpdatedLAMA, NewLAMA)에 대한 T5-Vanilla와 T5-Modular의 예측 결과를 보여줍니다. 각 모델에 대해 모든 훈련 에포크에 대한 예측을 표시합니다. 인스턴스는 최종 예측에서 T5-Modular가 맞혔지만 T5-Initial이 틀린 예측에서 선택된 것으로, EM의 차이가 어디에서 오는지 확인하기 위해서입니다.