After pre-training, it requires further fine-tuning LLMs to enhance the model capacity, which often involve two major steps, namely instruction tuning (supervised fine-tuning) and alignment tuning. In this section, we mainly focus on discussing the related available datasets for the two kinds of tuning approaches, and more algorithm details can be found in Section 5.
사전 학습 후에는 모델 용량을 향상시키기 위해 LLM을 추가로 Fine-tuning해야 하는데, 여기에는 일반적으로 Instruction Tuning (Supervised Fine-tuning)과 alignment tuning이라는 두 가지 주요 단계가 포함됩니다. 이 섹션에서는 주로 두 가지 tuning 접근 방식에 사용할 수 있는 관련 데이터 세트에 대해 논의하고, 더 많은 알고리즘 세부 사항은 섹션 5에서 확인할 수 있습니다.
사전 학습 후에는 모델 용량을 향상시키기 위해 LLM을 추가로 미세 조정해야 하는데, 여기에는 일반적으로 지침 튜닝(지도 미세 조정)과 정렬 튜닝이라는 두 가지 주요 단계가 포함됩니다. 이 섹션에서는 주로 두 가지 튜닝 접근 방식에 사용할 수 있는 관련 데이터 세트에 대해 논의하고, 더 많은 알고리즘 세부 사항은 섹션 5에서 확인할 수 있습니다.