An important reason to fine-tune LLMs is to align the responses to the expectations humans will have when providing instructions through prompts. This is the so-called **instruction tuning**[133]. We dive into the details of how to design and engineer prompts in section IV-B, but in the context of instruction tuning, it is important to understand that the instruction is a prompt that specifies the task that the LLM should accomplish. Instruction tuning datasets such as Natural Instructions [134] include not only the task definition but other components such as positive/negative examples or things to avoid.
LLM을 Fine-tuning하는 중요한 이유는 프롬프트를 통해 지침을 제공할 때 인간이 기대하는 것에 대한 응답을 조정하기 위해서입니다. 이를 소위 **Instruction Tuning**[133]이라고 합니다. 프롬프트를 설계하고 엔지니어링하는 방법에 대한 자세한 내용은 섹션 IV-B에서 살펴보지만, Instruction Tuning의 맥락에서 Instruction은 LLM이 수행해야 하는 작업을 지정하는 프롬프트라는 점을 이해하는 것이 중요합니다. Natural Instructions[134]와 같은 Instruction Tuning 데이터 세트에는 작업 정의뿐만 아니라 긍정/부정 예시 또는 피해야 할 사항과 같은 다른 구성 요소도 포함됩니다.
LLM을 미세 조정하는 중요한 이유는 프롬프트를 통해 지침을 제공할 때 인간이 기대하는 것에 대한 응답을 조정하기 위해서입니다. 이를 소위 **지침 튜닝**[133]이라고 합니다. 프롬프트를 설계하고 엔지니어링하는 방법에 대한 자세한 내용은 섹션 IV-B에서 살펴보지만, 지침 튜닝의 맥락에서 지침은 LLM이 수행해야 하는 작업을 지정하는 프롬프트라는 점을 이해하는 것이 중요합니다. 자연스러운 지침[134]과 같은 지침 튜닝 데이터 세트에는 작업 정의뿐만 아니라 긍정/부정 예시 또는 피해야 할 사항과 같은 다른 구성 요소도 포함됩니다.