As discussed in Section 5.1, instruction tuning is the process of training pre-trained language models with formatted demonstration data (instructions paired with desired outputs). At early exploration, instruction data was mainly collected from NLP tasks [67], while it has been now extended to more diverse supervision data that pairs input and output texts (_e.g._, the utterances of open-ended dialogues). Training with such paired texts is also called _supervised fine-tuning (SFT)_ in the context of LLMs [66]. In this part, we mainly use the abbreviation _SFT_ for discussion but not instruction tuning, due to the simplicity and popularity.
지침 튜닝은 사전 학습된 언어 모델을 형식화된 데모 데이터(원하는 출력과 짝을 이룬 instructions)로 학습시키는 과정입니다. 초기 탐색 단계에서는 주로 NLP 작업에서 instruction 데이터를 수집했지만, 이제는 입력과 출력 텍스트를 짝으로 이룬 보다 다양한 감독 데이터(_예: 개방형 대화의 발화)로 확장되었습니다. 이러한 짝을 이룬 텍스트로 훈련하는 것을 LLM의 맥락에서 _Supervised Fine-tuning (SFT)_이라고도 합니다[66]. 이 부분에서는 간결성과 대중성 때문에 instruction tuning이 아닌 _SFT_라는 약어를 주로 사용합니다.
5.1절에서 설명한 바와 같이, 지침 튜닝은 사전 학습된 언어 모델을 형식화된 데모 데이터(원하는 출력과 짝을 이룬 지침)로 학습시키는 과정입니다. 초기 탐색 단계에서는 주로 NLP 작업에서 지침 데이터를 수집했지만, 이제는 입력과 출력 텍스트를 짝으로 이룬 보다 다양한 감독 데이터(_예: 개방형 대화의 발화)로 확장되었습니다. 이러한 짝을 이룬 텍스트로 훈련하는 것을 LLM의 맥락에서 _지도 미세 조정(SFT)_이라고도 합니다[66]. 이 부분에서는 간결성과 대중성 때문에 지침 튜닝이 아닌 _SFT_라는 약어를 주로 사용합니다.