Figure 6: **Hutter++ on Bigram with limited data and top-p.** The initial model is trained on \(T_{0}=100,000\) samples. It generates \(T\) samples for Gen 1. Starting from Gen 2 models are trained on data generated by the most powerful model from the previous generation. Top-p-0.95 cutting and \(\beta=3/2\).
그림 6: **데이터가 제한되고 top-p가 있는 Bigram의 Hutter++.** 초기 모델은 \(T_{0}=100,000\) 샘플에 대해 학습됩니다. Gen 1의 경우 \(T\) 샘플을 생성합니다. 2세대부터는 이전 세대의 가장 강력한 모델이 생성한 데이터에 대해 모델을 학습합니다. top-p-0.95 컷팅 및 \(\beta=3/2\).
그림 6: **데이터가 제한되고 상위 p가 있는 빅램의 Hutter++.** 초기 모델은 \(T_{0}=100,000\) 샘플에 대해 학습됩니다. Gen 1의 경우 \(T\) 샘플을 생성합니다. 2세대부터는 이전 세대의 가장 강력한 모델이 생성한 데이터에 대해 모델을 학습합니다. 상위 p-0.95 컷팅 및 \(\베타=3/2\).