Footnote 7: In this work, we see C4 and Wikipedia together as \(D_{0}\), because we do not measure how the knowledge in LMs change in between training on those two corpora.
Footnote 7: 본 연구에서는 C4와 Wikipedia를 함께 \(D_{0}\)로 간주합니다. 이는 두 코퍼스에서 훈련하는 동안 LMs의 지식이 어떻게 변하는지 측정하지 않기 때문입니다.
각주 7: 이 연구에서는 두 말뭉치를 학습하는 동안 LM의 지식이 어떻게 변하는지 측정하지 않기 때문에 C4와 Wikipedia를 함께 \(D_{0}\)로 간주합니다.