where \(N_{c}\) and \(\alpha_{N}\) are constant scalars that can be found by statistical fitting, and \(L(N)\) is the _final test loss_ when the model converges. In other words, \(L(N)\) is the _test loss limit_ that an \(N\)-parameter model can achieve at the best (_i.e._, given the infinite training data, optimal optimizer and hyperparameters, and long enough training time). Note that since we assume the model is trained with infinite data, overfitting is impossible and thus the training loss should exhibit almost the same trend as the test loss.
여기서 \(N_{c}\)와 \(\alpha_{N}\)는 통계적 피팅을 통해 구할 수 있는 상수 스칼라이며, \(L(N)\)은 모델이 수렴할 때의 _최종 테스트 Loss_입니다. 즉, \(L(N)\)은 \(N\) 파라미터 모델이 최상의 경우에 달성할 수 있는 _테스트 Loss 한계_입니다(_즉, 무한한 훈련 데이터, 최적의 Optimizer 및 하이퍼파라미터가 주어지고 충분히 긴 훈련 시간이 주어진 경우). 모델이 무한한 데이터로 훈련된다고 가정하기 때문에 과적합은 불가능하므로 훈련 Loss는 테스트 Loss와 거의 동일한 추세를 보여야 합니다.
여기서 \(N_{c}\)와 \(\alpha_{N}\)는 통계적 피팅을 통해 구할 수 있는 상수 스칼라이며, \(L(N)\)은 모델이 수렴할 때의 _최종 테스트 손실_입니다. 즉, \(L(N)\)은 \(N\) 파라미터 모델이 최상의 경우에 달성할 수 있는 _테스트 손실 한계_입니다(_즉, 무한한 훈련 데이터, 최적의 옵티마이저 및 하이퍼파라미터가 주어지고 충분히 긴 훈련 시간이 주어진 경우). 모델이 무한한 데이터로 훈련된다고 가정하기 때문에 과적합은 불가능하므로 훈련 손실은 테스트 손실과 거의 동일한 추세를 보여야 합니다.