* As shown in Fig. 5(a) and Fig. 5(b), among all cases where LLMs have minimized perplexity on documents, cases trained with more epochs or larger learning rates typically exhibit superior QA performance. We hypothesize that _more aggressive training leads to less overfitting to deceptive patterns in documents and better generalization when responding to questions_.
* 그림 5(a)와 그림 5(b)에서 볼 수 있듯이, LLMs이 문서에서 perplexity를 최소화한 모든 사례 중에서 더 많은 epochs 또는 더 큰 learning rates로 훈련된 사례가 일반적으로 우수한 QA 성능을 보입니다. 우리는 _더 aggressive한 training이 문서의 기만적인 패턴에 대한 overfitting을 줄이고 질문에 응답할 때 더 나은 generalization을 이끌어낸다는 가설을 세웁니다_.
* 그림 5(a)와 그림 5(b)에서 볼 수 있듯이, LLM이 문서에서 난해함을 최소화한 모든 사례 중에서 더 많은 에포크 또는 더 큰 학습률로 훈련된 사례가 일반적으로 우수한 QA 성능을 보입니다. 우리는 _더 공격적인 훈련이 문서의 기만적인 패턴에 대한 과적합을 줄이고 질문에 응답할 때 더 나은 일반화를 이끌어낸다는 가설을 세웁니다_.