Large language models (LLMs) mainly refer to transformer-based PLMs that contain tens to hundreds of billions of parameters. Compared to PLMs reviewed above, LLMs are not only much larger in model size, but also exhibit stronger language understanding and generation and emergent abilities that are not present in smaller-scale models. In what follows, we review three LLM families: GPT, LLaMA, and PaLM, as illustrated in Fig 8.
대규모 언어 모델(LLMs)은 주로 수백억 개의 파라미터를 포함하는 Transformer 기반 PLMs을 의미합니다. 위에서 검토한 PLMs에 비해 LLMs은 모델 크기가 훨씬 클 뿐만 아니라 더 작은 규모의 모델에는 없는 더 강력한 언어 이해 및 생성 및 창발적 능력도 보여줍니다. 다음에서는 그림 8과 같이 GPT, LLaMA, PaLM의 세 가지 LLM 제품군을 검토합니다.
대규모 언어 모델(LLM)은 주로 수백억 개의 파라미터를 포함하는 트랜스포머 기반 PLM을 의미합니다. 위에서 검토한 PLM에 비해 LLM은 모델 크기가 훨씬 크기만 아니라 더 작은 규모의 모델에는 없는 더 강력한 언어 이해 및 생성 및 창발적 능력도 보여줍니다. 다음에서는 그림 8과 같이 GPT, LLaMA, PaLM의 세 가지 LLM 제품군을 검토합니다.