Optimal scalingWe find a range consistent with the 20 tokens per parameter rule of thumb. Indeed, our point estimates imply that 25.6 tokens per parameters is optimal.
최적의 스케일링 우리는 매개변수당 20개의 토큰 규칙과 일치하는 범위를 발견했습니다. 실제로, 우리의 포인트 추정치는 매개변수당 25.6개의 토큰이 최적임을 시사합니다.
최적의 스케일링매개변수당 20개의 토큰 규칙을 일관되게 적용합니다. 실제로 우리의 점 추정치는 매개변수당 25.6개의 토큰이 최적임을 의미합니다.