Moreover, we conduct experiments to investigate mixing a proportion of real data with AI-generated data. Figure 7 demonstrates the effect of blending a random 2% of original data with AI data across all fine-tuning phases. It significantly mitigates model collapse, with the emergence of a grokking curve as predicted in Theorem 3.2.
또한 실제 데이터와 AI 생성 데이터의 비율을 혼합하는 실험을 수행합니다. 그림 7은 모든 Fine-tuning 단계에서 원본 데이터의 무작위 2%와 AI 데이터를 혼합하는 효과를 보여줍니다. 이는 정리 3.2에서 예측한 것처럼 grokking 곡선이 등장하면서 모델 붕괴를 크게 완화합니다.
또한 실제 데이터와 AI 생성 데이터의 비율을 혼합하는 실험을 수행합니다. 그림 7은 모든 미세 조정 단계에서 원본 데이터의 무작위 2%와 AI 데이터를 혼합하는 효과를 보여줍니다. 이는 정리 3.2에서 예측한 것처럼 그로킹 곡선이 등장하면서 모델 붕괴를 크게 완화합니다.