\(\bullet\)_Open-source models_. Existing open-source models can be categorized into base models and instruction-tuned models. Base models are only pre-trained on a large general-purpose corpus with the language modeling objective, but without further supervised fine-tuning. In our evaluation, we select four representative base models including LLaMA (7B) [57], LLaMA 2 (7B) [99], Pythia (7B and 12B) [96], and Falcon (7B) [747]46. Instruction-tuned models are those fine-tuned using instructions (_i.e.,_ task datasets, daily chat, or synthetic instructions). In our experiments, we select four representative instruction-tuned models including Vicuna (7B and 13B) [138], Alpaca (7B) [137], and ChatGLM (6B) [93]. In addition, we also include LLaMA 2-Chat (7B) [99] for comparison, and it is a representative model that has been aligned with human via instruction tuning and RLHF, based on LLaMA 2 (7B).
\(\bullet\)_Open-source models_. 기존 open-source 모델은 base 모델과 instruction-tuned 모델로 분류할 수 있습니다. Base 모델은 언어 모델링 objective를 위해 대규모 범용 코퍼스에 대해 사전 학습을 거쳤을 뿐, 추가적인 supervised Fine-tuning은 거치지 않습니다. 평가에서는 LLaMA(7B) [57], LLaMA 2(7B) [99], Pythia(7B 및 12B) [96], Falcon(7B) [747]46 등 대표적인 base 모델 4개를 선정했습니다. Instruction-tuned 모델은 instruction(_즉, task datasets, daily chat, 또는 synthetic instructions)을 사용하여 Fine-tuning한 모델입니다. 실험에서는 Vicuna(7B 및 13B) [138], Alpaca(7B) [137], ChatGLM(6B) [93] 등 대표적인 instruction-tuned 모델 4개를 선정했습니다. 또한 비교를 위해 LLaMA 2-Chat(7B) [99]도 포함했는데, 이 모델은 instruction tuning과 RLHF를 통해 인간과 정렬된 대표적인 모델로, LLaMA 2(7B)를 기반으로 합니다.
\(\bullet\)_오픈 소스 모델_. 기존 오픈 소스 모델은 기본 모델과 명령어 튜닝 모델로 분류할 수 있습니다. 기본 모델은 언어 모델링 목표를 위해 대규모 범용 코퍼스에 대해 사전 학습을 거쳤을 뿐, 추가적인 지도 미세 조정은 거치지 않습니다. 평가에서는 LLaMA(7B) [57], LLaMA 2(7B) [99], Pythia(7B 및 12B) [96], Falcon(7B) [747]46 등 대표적인 기본 모델 4개를 선정했습니다. 명령어 튜닝 모델은 명령어(_즉, 작업 데이터 세트, 일상 대화 또는 합성 명령어)를 사용하여 미세 조정한 모델입니다. 실험에서는 Vicuna(7B 및 13B) [138], Alpaca(7B) [137], ChatGLM(6B) [93] 등 대표적인 명령어 튜닝 모델 4개를 선정했습니다. 또한 비교를 위해 LLaMA 2-Chat(7B) [99]도 포함했는데, 이 모델은 명령어 튜닝과 RLHF를 통해 인간과 정렬된 대표적인 모델로, LLaMA 2(7B)를 기반으로 합니다.