Now, let us analyze Eq. 3.13, which is the relation between the loss value \(L\) and the training step \(S\) under a fixed finite batch size \(B\). All other quantities are constant scalars that have been worked out before (\(N_{c},\alpha_{N},S_{c},\alpha_{S},B_{*}\) and \(\alpha_{B}\)). The difficulty of computing the loss value \(L(N,S,B)\) is that it appears on both sides of the equation. Although there is no analytical solution to isolate \(L(N,S,B)\) here, we can numerically estimate \(L(N,S,B)\) by any root-finding method (_e.g._, the bisection method) because it is the only unknown quantity in Eq. 3.13.
이제 고정된 유한 Batch Size \(B\)에서 Loss 값 \(L\)과 훈련 단계 \(S\) 사이의 관계인 Eq. 3.13을 분석해 보겠습니다. 다른 모든 양은 이전에 계산된 상수 스칼라입니다(\(N_{c},\alpha_{N},S_{c},\alpha_{S},B_{*}\) 및 \(\alpha_{B}\)). Loss 값 \(L(N,S,B)\)를 계산하기 어려운 점은 방정식의 양쪽에 나타나기 때문입니다. 여기서 \(L(N,S,B)\)를 분리하는 해석적 해는 없지만, 근 찾기 방법(예: 이등분법)을 사용하여 수치적으로 추정할 수 있습니다. 3.13에서 \(L(N,S,B)\)는 유일한 미지 수량이기 때문입니다.
이제 고정된 유한 배치 크기 \(B\)에서 손실 값 \(L\)과 훈련 단계 \(S\) 사이의 관계인 Eq. 3.13을 분석해 보겠습니다. 다른 모든 양은 이전에 계산된 상수 스칼라입니다(\(N_{c},\알파_{N},S_{c},\알파_{S},B_{*}\) 및 \(\알파_{B}\)). 손실 값 \(L(N,S,B)\)를 계산하기 어려운 점은 방정식의 양쪽에 나타나기 때문입니다. 여기서 \(L(N,S,B)\)를 분리하는 해석적 해는 없지만, 근 찾기 방법(예: 이등분법)을 사용하여 수치적으로 추정할 수 있습니다. 3.13에서 \(L(N,S,B)\)는 유일한 미지 수량이기 때문입니다.