\(\bullet\)_KM scaling law5_. In 2020, Kaplan et al. [30] (the OpenAI team) firstly proposed to model the power-law relationship of model performance with respective to three major factors, namely model size (\(N\)), dataset size (\(D\)), and the amount of training compute (\(C\)), for neural language models.
\(\bullet\)_KM scaling law5_. 2020년에 Kaplan 등[30](OpenAI 팀)은 신경 언어 모델에 대해 모델 크기(\(N\)), 데이터 세트 크기(\(D\)), 훈련 컴퓨팅량(\(C\))의 세 가지 주요 요인에 대한 모델 성능의 power-law 관계를 모델링하는 것을 처음으로 제안했습니다.
\(\bullet\)_KM 스케일링 법칙5_. 2020년에 Kaplan 등[30](OpenAI 팀)은 신경 언어 모델에 대해 모델 크기(\(N\)), 데이터 세트 크기(\(D\)), 훈련 컴퓨팅량(\(C\))의 세 가지 주요 요인에 대한 모델 성능의 거듭제곱 법칙 관계를 모델링하는 것을 처음으로 제안했습니다.