Figure 1: Scaling laws for GPT2 pretrained on \(\mathsf{bioS}(N)\) data using fp16 (mixed-precision) for 1000/100 exposures.
그림 1: 1000/100 노출에 대해 fp16(mixed-precision)을 사용하여 \(\mathsf{bioS}(N)\) 데이터에 대해 사전 학습된 GPT2의 Scaling laws.
그림 1: 1000/100 노출에 대해 fp16(혼합 정밀도)을 사용하여 \(\mathsf{bioS}(N)\) 데이터에 대해 사전 학습된 GPT2의 스케일링 법칙.