where \(a=\frac{\alpha}{\alpha+\beta}\), \(b=\frac{\beta}{\alpha+\beta}\) and \(G\) is a scaling coefficient that can be computed by \(A\), \(B\), \(\alpha\) and \(\beta\). As analyzed in [34],given an increase in compute budget, the KM scaling law favors a larger budget allocation in model size than the data size, while the Chinchilla scaling law argues that the two sizes should be increased in equal scales, _i.e._, having similar values for \(a\) and \(b\) in Equation (3).
여기서 \(a=\frac{\alpha}{\alpha+\beta}\), \(b=\frac{\beta}{\alpha+\beta}\), \(G\)는 \(A\), \(B\), \(\alpha\) 및 \(\beta\)로 계산할 수 있는 scaling 계수입니다. [34]에서 분석한 바와 같이, 계산 예산이 증가하면 KM scaling 법칙은 데이터 크기보다 모델 크기에 더 많은 예산을 할당하는 것을 선호하는 반면, Chinchilla scaling 법칙은 두 크기를 동일한 비율로 증가시켜야 한다고 주장합니다(즉, 식 (3)에서 \(a\)와 \(b\)의 값이 비슷해야 함).
여기서 \(a=\frac{\알파}{\알파+\베타}\), \(b=\frac{\베타}{\알파+\베타}\), \(G\)는 \(A\), \(B\), \(\알파\) 및 \(\베타\)로 계산할 수 있는 스케일링 계수입니다. [34]에서 분석한 바와 같이, 계산 예산이 증가하면 KM 스케일링 법칙은 데이터 크기보다 모델 크기에 더 많은 예산을 할당하는 것을 선호하는 반면, 친칠라 스케일링 법칙은 두 크기를 동일한 비율로 증가시켜야 한다고 주장합니다(즉, 식 (3)에서 \(a\)와 \(b\)의 값이 비슷해야 함).