Figure 7: Impact of deduplicating the training set on validation perplexity. In **(a)**, we plot the results from T5 base (110M parameters) across three training runs with different random initializations. The black bar represent the lowest perplexity to the highest perplexity, and the colored bar the median perplexity. In **(b)**, we plot the results from T5 XL (1.5B parameters).
그림 7: 훈련 세트 중복 제거가 validation perplexity에 미치는 영향. **(a)**에서는 서로 다른 무작위 초기화를 가진 세 번의 훈련 실행에서 T5 base (110M parameters)의 결과를 그래프로 표시합니다. 검은색 막대는 가장 낮은 perplexity에서 가장 높은 perplexity를 나타내며, 색상 막대는 중앙값 perplexity를 나타냅니다. **(b)**에서는 T5 XL (1.5B parameters)의 결과를 그래프로 표시합니다.
그림 7: 훈련 세트 중복 제거가 유효성 검사 난해도에 미치는 영향. (a)**에서는 서로 다른 무작위 초기화를 가진 세 번의 훈련 실행에서 T5 기본(110M 파라미터)의 결과를 그래프로 표시합니다. 검은색 막대는 가장 낮은 난해도에서 가장 높은 난해도를 나타내며, 색상 막대는 중앙값 난해도를 나타냅니다. (b)**에서는 T5 XL(1.5B 파라미터)의 결과를 그래프로 표시합니다.