\(\bullet\)_Scaling the instructions._ It has been widely shown that scaling the number of tasks can largely enhance the generalization ability of LLMs [28, 67, 88]. With the increasing of the task number, the model performance initially shows a continuous growth pattern, while the gain becomes negligible when it reaches a certain level [69, 88]. A plausible speculation is that a certain number of representative tasks can provide relatively sufficient knowledge and adding more tasks may not bring additional gains [69]. Also, it is beneficial to enhance the diversity of the task descriptions in several aspects, such as length, structure, and creativity [28]. As for the number of instances per task, it has been found that a small number of instances can usually saturate the generalization performance of the model to perform a specific task [67, 69]. Specially, several recent work [349, 350] has explored the effect of fine-tuning with a small amount of high-quality instruction data (_e.g.,_ one or a few thousand instances), showing very promising results on the evaluation tasks. In contrast, another line of studies continue to explore the scaling effect of instruction data [351, 352]. For example, Orca [351] scales up the synthesized instances to 5 million with step-by-step explanations, and it achieves superior performance across a wide range of tasks compared to the methods tuned with instruction data.
\(\bullet\)_Instruction 스케일링._ 작업 수를 확장하면 LLM의 일반화 능력을 크게 향상시킬 수 있다는 사실이 널리 알려져 있습니다[28, 67, 88]. 작업 수가 증가함에 따라 모델 성능은 처음에는 지속적인 성장 패턴을 보이는 반면, 일정 수준에 도달하면 그 이득은 무시할 수 있을 정도로 줄어듭니다[69, 88]. 그럴듯한 추측은 일정 수의 대표적인 작업이 상대적으로 충분한 지식을 제공할 수 있으며 작업을 더 추가해도 추가적인 이득을 가져오지 못할 수 있다는 것입니다[69]. 또한 길이, 구조, 창의성 등 여러 측면에서 작업 설명의 다양성을 높이는 것이 도움이 됩니다[28]. 작업당 인스턴스 수의 경우, 일반적으로 소수의 인스턴스가 특정 작업을 수행하는 모델의 일반화 성능을 포화 상태로 만들 수 있는 것으로 나타났습니다[67, 69]. 특히, 최근 몇몇 연구[349, 350]에서는 소량의 고품질 Instruction 데이터(예: 수천 개의 인스턴스)로 Fine-tuning하는 효과를 탐구하여 평가 작업에서 매우 유망한 결과를 보여주었습니다. 이와는 대조적으로, 다른 연구에서는 Instruction 데이터의 스케일링 효과를 계속 탐구하고 있습니다[351, 352]. 예를 들어, Orca[351]는 합성된 인스턴스를 단계별 설명과 함께 5백만 개로 확장하여 Instruction 데이터로 조정된 방법에 비해 광범위한 작업에서 우수한 성능을 달성했습니다.
\(\bullet\)_인스트럭션 스케일링._ 작업 수를 확장하면 LLM의 일반화 능력을 크게 향상시킬 수 있다는 사실이 널리 알려져 있습니다[28, 67, 88]. 작업 수가 증가함에 따라 모델 성능은 처음에는 지속적인 성장 패턴을 보이는 반면, 일정 수준에 도달하면 그 이득은 무시할 수 있을 정도로 줄어듭니다[69, 88]. 그럴듯한 추측은 일정 수의 대표적인 작업이 상대적으로 충분한 지식을 제공할 수 있으며 작업을 더 추가해도 추가적인 이득을 가져오지 못할 수 있다는 것입니다[69]. 또한 길이, 구조, 창의성 등 여러 측면에서 작업 설명의 다양성을 높이는 것이 도움이 됩니다[28]. 작업당 인스턴스 수의 경우, 일반적으로 소수의 인스턴스가 특정 작업을 수행하는 모델의 일반화 성능을 포화 상태로 만들 수 있는 것으로 나타났습니다[67, 69]. 특히, 최근 몇몇 연구[349, 350]에서는 소량의 고품질 명령 데이터(예: 수천 개의 인스턴스)로 미세 조정하는 효과를 탐구하여 평가 작업에서 매우 유망한 결과를 보여주었습니다. 이와는 대조적으로, 다른 연구에서는 지시 데이터의 스케일링 효과를 계속 탐구하고 있습니다[351, 352]. 예를 들어, Orca[351]는 합성된 인스턴스를 단계별 설명과 함께 5백만 개로 확장하여 지시 데이터로 조정된 방법에 비해 광범위한 작업에서 우수한 성능을 달성했습니다.