* As shown in Fig. 5(a), QA accuracy consistently improves as perplexity approaches one, indicating that _factual knowledge learning necessitates exhaustive loss minimization over all tokens_. This contrasts with learning general skills, where overly optimizing leads to overfitting.
* 그림 5(a)에서 볼 수 있듯이, Perplexity가 1에 가까워질수록 QA 정확도는 지속적으로 향상되는데, 이는 _사실적 지식 학습에는 모든 토큰에 대한 철저한 Loss 최소화가 필요하다는 것을 나타냅니다_. 이는 지나치게 최적화하면 과적합으로 이어지는 일반적인 기술 학습과는 대조적입니다.
* 그림 5(a)에서 볼 수 있듯이, 당혹도가 1에 가까워질수록 QA 정확도는 지속적으로 향상되는데, 이는 _사실적 지식 학습에는 모든 토큰에 대한 철저한 손실 최소화가 필요하다는 것을 나타냅니다_. 이는 지나치게 최적화하면 과적합으로 이어지는 일반적인 기술 학습과는 대조적입니다.