Supervised Fine-Tuning Supervised fine-tuning (SFT) requires sets of labeled input-output pairs. One of the most common SFT methods is instruction tuning (Wang et al., 2022; Mishra et al., 2021; Ouyang et al., 2022; Taori et al., 2023), which has emerged as one of the most powerful methods to improve model performance. With instruction tuning, the input is a natural language task description, and the output is an example of the desired behavior. Many current state-of-the-art LLMs have gone through instruction tuning after their pre-training phase.
Supervised Fine-Tuning Supervised Fine-Tuning (SFT)에는 레이블이 지정된 입력-출력 쌍 세트가 필요합니다. 가장 일반적인 SFT 방법 중 하나는 모델 성능을 향상시키는 가장 강력한 방법 중 하나로 떠오른 Instruction Tuning(Wang et al., 2022; Mishra et al., 2021; Ouyang et al., 2022; Taori et al., 2023)입니다. Instruction Tuning을 사용하면 입력은 자연어 작업 설명이고 출력은 원하는 동작의 예입니다. 현재 많은 최첨단 LLM이 사전 학습 단계를 거친 후 Instruction Tuning을 거쳤습니다.
지도 미세 조정지도 미세 조정(SFT)에는 레이블이 지정된 입력-출력 쌍 세트가 필요합니다. 가장 일반적인 SFT 방법 중 하나는 모델 성능을 향상시키는 가장 강력한 방법 중 하나로 떠오른 명령어 튜닝(Wang et al., 2022; Mishra et al., 2021; Ouyang et al., 2022; Taori et al., 2023)입니다. 명령어 튜닝을 사용하면 입력은 자연어 작업 설명이고 출력은 원하는 동작의 예입니다. 현재 많은 최첨단 LLM이 사전 학습 단계를 거친 후 명령어 튜닝을 거쳤습니다.