In the 1000-exposure setting, we observe that the model architecture choices have a _negligible impact_ on the scaling laws. The results for LLaMA, Mistral, GPT2\({}_{0}\), and GPT2\({}_{1/4}\) architectures are presented in Figure 3, with their parameter choices discussed below.
1000 노출 설정에서 모델 아키텍처 선택이 scaling laws에 미치는 영향은 _미미한 수준_임을 관찰할 수 있습니다. LLaMA, Mistral, GPT2\({}_{0}\), GPT2\({}_{1/4}\) 아키텍처에 대한 결과는 그림 3에 나와 있으며, 해당 파라미터 선택에 대해서는 아래에서 설명합니다.
1000 노출 설정에서 모델 아키텍처 선택이 스케일링 법칙에 미치는 영향은 _미미한 수준_임을 관찰할 수 있습니다. LLaMA, Mistral, GPT2\({}_{0}\), GPT2\({}_{1/4}\) 아키텍처에 대한 결과는 그림 3에 나와 있으며, 해당 파라미터 선택에 대해서는 아래에서 설명합니다.