Footnote 8: It is difficult to accurately examine the critical size for emergent abilities of LLMs (_i.e._, the minimum size to possess an ability), since it might vary for different models or tasks. Also, existing studies often test emergent abilities on very limited model sizes for a specific LLM. For example, PaLM is often tested with three sizes of 8B, 62B and 540B. It is unclear about the model performance of the untested sizes.
각주 8: LLM의 새로운 능력에 대한 임계 크기(_즉, 능력을 갖추기 위한 최소 크기)는 모델이나 작업에 따라 다를 수 있기 때문에 정확하게 조사하기는 어렵습니다. 또한 기존 연구에서는 특정 LLM에 대해 매우 제한된 모델 크기에서 emergent abilities를 테스트하는 경우가 많습니다. 예를 들어, PaLM은 8B, 62B, 540B의 세 가지 크기로 테스트되는 경우가 많습니다. 테스트되지 않은 크기의 모델 성능은 불분명합니다.
각주 8: LLM의 새로운 능력에 대한 임계 크기(_즉, 능력을 갖추기 위한 최소 크기)는 모델이나 작업에 따라 다를 수 있기 때문에 정확하게 조사하기는 어렵습니다. 또한 기존 연구에서는 특정 LLM에 대해 매우 제한된 모델 크기에서 새로운 능력을 테스트하는 경우가 많습니다. 예를 들어, PaLM은 8B, 62B, 540B의 세 가지 크기로 테스트되는 경우가 많습니다. 테스트되지 않은 크기의 모델 성능은 불분명합니다.