argue for the same scaling rate between model size and data size. What's more, current models such as LLama 2 (Touvron et al., 2023), trains much more data than what Hoffmann et al. (2022) claims, still yielding considerable performance gain. Indicating a higher data-to-model ratio.
모델 크기와 데이터 크기 사이의 동일한 scaling rate을 주장합니다. 게다가 LLama 2(Touvron et al., 2023)와 같은 최신 모델은 Hoffmann 등(2022)이 주장하는 것보다 훨씬 더 많은 데이터를 학습하고 있으며, 여전히 상당한 성능 향상을 가져다줍니다. 데이터 대 모델 비율이 더 높다는 것을 나타냅니다.
모델 크기와 데이터 크기 사이의 동일한 확장률을 주장합니다. 게다가 LLama 2(Touvron et al., 2023)와 같은 최신 모델은 Hoffmann 등(2022)이 주장하는 것보다 훨씬 더 많은 데이터를 학습하고 있으며, 여전히 상당한 성능 향상을 가져다줍니다. 데이터 대 모델 비율이 더 높다는 것을 나타냅니다.