\(\bullet\)_Scaling the instruction number._ In addition to the above aspects, the number of instructions is also an important factor that may affect the model performance. Specially, using more instructions can extend the task knowledge and improve the ability of instruction following for LLMs [69]. To examine this strategy, we sample new instructions from the synthesized instruction set released from the MOSS project [362], as they are also synthesized using the same self-instruct method [143]. We mix them with the Self-Instruct-52K dataset to compose a larger one containing 220K instructions.
\(\bullet\)_명령어 수를 확장합니다._ 위의 측면 외에도 명령어 수도 모델 성능에 영향을 미칠 수 있는 중요한 요소입니다. 특히, 더 많은 instructions를 사용하면 작업 지식을 확장하고 LLM의 instruction 수행 능력을 향상시킬 수 있습니다[69]. 이 전략을 검토하기 위해 MOSS 프로젝트[362]에서 공개된 합성 instruction 세트에서 새로운 instructions를 샘플링합니다[143]. 이를 Self-Instruct-52K 데이터 세트와 혼합하여 220K개의 instructions가 포함된 더 큰 데이터 세트를 구성합니다.
\(\bullet\)_명령어 수를 확장합니다._ 위의 측면 외에도 명령어 수도 모델 성능에 영향을 미칠 수 있는 중요한 요소입니다. 특히, 더 많은 명령어를 사용하면 작업 지식을 확장하고 LLM의 명령어 수행 능력을 향상시킬 수 있습니다[69]. 이 전략을 검토하기 위해 MOSS 프로젝트[362]에서 공개된 합성 명령어 세트에서 새로운 명령어를 샘플링합니다[143]. 이를 Self-Instruct-52K 데이터 세트와 혼합하여 220K개의 명령어가 포함된 더 큰 데이터 세트를 구성합니다.