This underscores the _crucial importance of pretrain data quality_: even if junk data is entirely random, it negatively impacts model's knowledge capacity even with sufficient training.
이는 _사전 학습 데이터 품질의 결정적인 중요성_을 강조합니다: 쓰레기 데이터가 완전히 무작위일지라도, 충분한 훈련이 이루어졌더라도 모델의 지식 용량에 부정적인 영향을 미칩니다.
이는 _사전 학습 데이터 품질의 중요성_을 강조합니다. 정크 데이터가 완전히 무작위라 하더라도 충분한 훈련을 통해서도 모델의 지식 능력에 부정적인 영향을 미칩니다.