Fig. 24: Timeline of some of the most representative LLM frameworks (so far). In addition to large language models with our #parameters threshold, we included a few representative works, which pushed the limits of language models, and paved the way for their success (e.g. vanilla Transformer, BERT, GPT-1), as well as some small language models. \(\clubsuit\) shows entities that serve not only as models but also as approaches. \(\clubsuit\) shows only approaches.
그림 24: 가장 대표적인 LLM 프레임워크의 타임라인(지금까지). 파라미터 임계값을 넘어선 Large Language Models (LLMs) 외에도 언어 모델의 한계를 뛰어넘고 성공의 토대를 마련한 몇 가지 대표적인 연구(예: vanilla Transformer, BERT, GPT-1)와 소규모 언어 모델도 포함했습니다. \(\clubsuit\)는 모델일 뿐만 아니라 접근 방식으로도 사용되는 엔티티를 보여줍니다. \(\clubsuit\)는 접근 방식만을 보여줍니다.
그림 24: 가장 대표적인 LLM 프레임워크의 타임라인(지금까지). 파라미터 임계값을 넘어선 대규모 언어 모델 외에도 언어 모델의 한계를 뛰어넘고 성공의 토대를 마련한 몇 가지 대표적인 연구(예: 바닐라 트랜스포머, BERT, GPT-1)와 소규모 언어 모델도 포함했습니다. \(\clubsuit\)는 모델일 뿐만 아니라 접근 방식으로도 사용되는 엔티티를 보여줍니다. \(\clubsuit\)는 접근 방식만을 보여줍니다.