**Emergent Abilities of LLMs**. In the literature [31], _emerget abilities_ of LLMs are formally defined as "the abilities that are not present in small models but arise in large models", which is one of the most prominent features that distinguish LLMs from previous PLMs. It further introduces a notable characteristic when emergent abilities occur [31]: performance rises significantly above random when the scale reaches a certain level. By analogy, such an emergent pattern has close connections with the phenomenon of _phase transition_ in physics [31, 63]. In principle, emergent abilities can be defined in relation to some complex tasks [31, 64], while we are more concerned with general abilities that can be applied to solve a variety of tasks. Here, we briefly introduce three typical emergent abilities for LLMs and representative models that possess such an ability8.
**Emergent Abilities of LLMs**. 문헌 [31]에서 LLM의 _emergent abilities_는 "작은 모델에는 존재하지 않지만 대규모 모델에서 발생하는 능력"으로 공식적으로 정의되며, 이는 LLM을 이전 PLM과 구별하는 가장 두드러진 특징 중 하나입니다. 이는 규모가 일정 수준에 도달하면 성능이 무작위보다 크게 상승하는 [31]에서 emergent abilities가 발생하는 주목할 만한 특징을 소개합니다. 비유하자면, 이러한 emergent 패턴은 물리학에서 _phase transition_ 현상과 밀접한 관련이 있습니다 [31, 63]. 원칙적으로 emergent abilities는 일부 복잡한 작업과 관련하여 정의할 수 있지만 [31, 64], 우리는 다양한 작업을 해결하는 데 적용할 수 있는 일반적인 능력에 더 관심이 있습니다. 여기서는 LLM에 대한 세 가지 대표적인 emergent abilities와 그러한 능력을 갖춘 대표적인 모델을 간략하게 소개합니다.8.
**LLM의 새로운 능력**. 문헌 [31]에서 LLM의 _이머전 능력_은 "작은 모델에는 존재하지 않지만 대규모 모델에서 발생하는 능력"으로 공식적으로 정의되며, 이는 LLM을 이전 PLM과 구별하는 가장 두드러진 특징 중 하나입니다. 이는 규모가 일정 수준에 도달하면 성능이 무작위보다 크게 상승하는 [31]에서 새로운 능력이 발생하는 주목할 만한 특징을 소개합니다. 비유하자면, 이러한 새로운 패턴은 물리학에서 _상전이_ 현상과 밀접한 관련이 있습니다 [31, 63]. 원칙적으로 새로운 능력은 일부 복잡한 작업과 관련하여 정의할 수 있지만 [31, 64], 우리는 다양한 작업을 해결하는 데 적용할 수 있는 일반적인 능력에 더 관심이 있습니다. 여기서는 LLM에 대한 세 가지 대표적인 새로운 능력과 그러한 능력을 갖춘 대표적인 모델을 간략하게 소개합니다.8.