Early language models such as BERT trained using self-supervision as explained in section III-E were not able to perform specific tasks. In order for the foundation model to be useful it needed to be fine-tuned to a specific task with labeled data (so-called supervised fine-tuning or SFT for short). For example, in the original BERT paper [24], the model was fine-tuned to 11 different tasks. While more recent LLMs no longer require fine-tuning to be used, they can still benefit from task or data-specific fine-tuning. For example, OpenAI reports that the much smaller GPT-3.5 Turbo model can outperform GPT-4 when fine-tuned with task specific data 2.
III-E 절에서 설명한 것처럼 self-supervision을 사용하여 훈련된 BERT와 같은 초기 언어 모델은 특정 작업을 수행할 수 없었습니다. 기반 모델이 유용하게 사용되기 위해서는 레이블이 지정된 데이터(일명 supervised Fine-tuning 또는 짧게는 SFT)를 사용하여 특정 작업에 맞게 Fine-tuning해야 했습니다. 예를 들어, 최초의 BERT 논문[24]에서는 11개의 서로 다른 작업에 맞게 모델을 Fine-tuning했습니다. 최신 LLM은 더 이상 Fine-tuning을 거치지 않고도 사용할 수 있지만, 여전히 작업 또는 데이터별 Fine-tuning의 이점을 누릴 수 있습니다. 예를 들어, OpenAI는 훨씬 더 작은 GPT-3.5 Turbo 모델이 작업별 데이터로 Fine-tuning하면 GPT-4보다 성능이 뛰어날 수 있다고 보고했습니다.
III-E 절에서 설명한 것처럼 자가 감독을 사용하여 훈련된 BERT와 같은 초기 언어 모델은 특정 작업을 수행할 수 없었습니다. 기반 모델이 유용하게 사용되기 위해서는 레이블이 지정된 데이터(일명 지도 미세 조정 또는 짧게는 SFT)를 사용하여 특정 작업에 맞게 미세 조정해야 했습니다. 예를 들어, 최초의 BERT 논문[24]에서는 11개의 서로 다른 작업에 맞게 모델을 미세 조정했습니다. 최신 LLM은 더 이상 미세 조정을 거치지 않고도 사용할 수 있지만, 여전히 작업 또는 데이터별 미세 조정의 이점을 누릴 수 있습니다. 예를 들어, OpenAI는 훨씬 더 작은 GPT-3.5 터보 모델이 작업별 데이터로 미세 조정하면 GPT-4보다 성능이 뛰어날 수 있다고 보고했습니다.