\(\bullet\)_Enhancing the complexity and diversity of instructions leads to an improved model performance._ By increasing the complexity and diversity of the Self-Instruct-52K dataset respectively, the chat and QA performance of LLaMA can be consistently improved, _e.g._, from 37.52 to 39.73 in MMLU for LLaMA (7B). It demonstrates that both strategies are useful to improve the instruction following ability of LLMs. Further, we can see that improving the complexity yields a larger performance improvement on QA tasks. The reason is that the QA tasks mostly consist of difficult questions for evaluating LLMs, which can be better solved by LLMs that have learned complex instructions at the fine-tuning stage.
\(\bullet\)_명령어의 복잡성과 다양성을 향상하면 모델 성능이 향상됩니다._ Self-Instruct-52K 데이터 세트의 복잡성과 다양성을 각각 증가시킴으로써 LLaMA의 채팅 및 QA 성능을 일관되게 개선할 수 있습니다(예: LLaMA(7B)의 경우 MMLU에서 37.52에서 39.73으로). 이는 두 가지 전략 모두 LLM의 Instruction 수행 능력을 향상시키는 데 유용하다는 것을 보여줍니다. 또한 복잡성을 개선하면 QA 작업에서 더 큰 성능 향상을 얻을 수 있음을 알 수 있습니다. 그 이유는 QA 작업은 대부분 LLM을 평가하기 위한 어려운 질문으로 구성되며, Fine-tuning 단계에서 복잡한 Instruction을 학습한 LLM이 더 잘 해결할 수 있기 때문입니다.
\(\bullet\)_명령어의 복잡성과 다양성을 향상하면 모델 성능이 향상됩니다._ Self-Instruct-52K 데이터 세트의 복잡성과 다양성을 각각 증가시킴으로써 LLaMA의 채팅 및 QA 성능을 일관되게 개선할 수 있습니다(예: LLaMA(7B)의 경우 MMLU에서 37.52에서 39.73으로). 이는 두 가지 전략 모두 LLM의 명령어 수행 능력을 향상시키는 데 유용하다는 것을 보여줍니다. 또한 복잡성을 개선하면 QA 작업에서 더 큰 성능 향상을 얻을 수 있음을 알 수 있습니다. 그 이유는 QA 작업은 대부분 LLM을 평가하기 위한 어려운 질문으로 구성되며, 미세 조정 단계에서 복잡한 명령어를 학습한 LLM이 더 잘 해결할 수 있기 때문입니다.