Footnote 4: In existing literature, there is no formal consensus on the minimum parameter scale for LLMs, since the model capacity is also related to data size and total compute. In this survey, we take a slightly loose definition of LLMs, and mainly focus on discussing language models with a model size larger than 10B.
Footnote 4: 기존 문헌에서는 LLMs의 최소 파라미터 규모에 대한 공식적인 합의가 없습니다. 이는 모델 용량이 데이터 크기와 총 계산량과도 관련이 있기 때문입니다. 이 조사에서는 LLMs에 대해 다소 느슨한 정의를 사용하며, 주로 모델 크기가 10B 이상인 언어 모델에 대해 논의합니다.
각주 4: 기존 문헌에서는 모델 용량이 데이터 크기 및 총 계산량과도 관련되어 있기 때문에 LLM의 최소 파라미터 규모에 대한 공식적인 합의가 없습니다. 이 설문조사에서는 LLM에 대한 약간 느슨한 정의를 취하고 주로 모델 크기가 10B보다 큰 언어 모델에 대한 논의에 중점을 둡니다.