Figure 9: **In our core aggregate, deduplication brings a small improvement to the Pythia suite (Biderman et al., 2023).** Zero-shot performance on our core aggregate, gap between Pythia trained on the deduplicated and vanilla Pile. Individual curves for per-task results and 1-\(\sigma\) standard deviation across all tasks in the aggregate in transparent.
그림 9: **중심 집계에서 중복 제거는 Pythia 제품군에 약간의 개선을 가져옵니다(Biderman et al., 2023).** 중복 제거된 Pile과 일반 Pile에서 학습된 Pythia 간의 갭, 중심 집계에서 zero-shot 성능. 투명한 집계에 있는 모든 작업에 대한 개별 곡선 및 1-\(\sigma\) 표준 편차.
그림 9: **중심 집계에서 중복 제거는 Pythia 제품군에 약간의 개선을 가져옵니다(Biderman et al., 2023).** 중복 제거된 파일과 일반 파일에서 학습된 Pythia 간의 갭, 중심 집계에서 0-샷 성능. 투명한 집계에 있는 모든 작업에 대한 개별 곡선 및 1-\(\sigma\) 표준 편차.