\(\bullet\)_A larger model scale leads to a better instruction following performance._ By comparing the performance of LLaMA (7B) and LLaMA (13B) models fine-tuned with the same set of instruction data, we can see that LLaMA (13B) mostly achieves a better performance. It indicates that scaling the model size is helpful for improving the instruction following capability. Besides, we can see that the QA performance has been improved a lot, _e.g._, from 38.11 to 47.49 in MMLU. It is likely because that the larger models generally have better knowledge utilization and reasoning capability [33, 55], which can accurately answer more complex questions.
\(\bullet\)_모델 스케일이 클수록 Instruction 추종 성능이 향상됩니다._ 동일한 Instruction 데이터 세트로 Fine-tuning된 LLaMA(7B) 모델과 LLaMA(13B) 모델의 성능을 비교하면 LLaMA(13B)가 대부분 더 나은 성능을 보이는 것을 알 수 있습니다. 이는 모델 크기를 확장하는 것이 Instruction 추종 기능을 개선하는 데 도움이 된다는 것을 나타냅니다. 또한 QA 성능이 크게 개선되었음을 알 수 있습니다. 예를 들어 MMLU에서 38.11에서 47.49로 향상되었습니다. 이는 더 큰 모델이 일반적으로 더 나은 지식 활용 및 추론 기능[33, 55]을 가지고 있어 더 복잡한 질문에 정확하게 답할 수 있기 때문일 것입니다.
\(\bullet\)_모델 스케일이 클수록 명령어 추종 성능이 향상됩니다._ 동일한 명령어 데이터 세트로 미세 조정된 LLaMA(7B) 모델과 LLaMA(13B) 모델의 성능을 비교하면 LLaMA(13B)가 대부분 더 나은 성능을 보이는 것을 알 수 있습니다. 이는 모델 크기를 확장하는 것이 명령어 추종 기능을 개선하는 데 도움이 된다는 것을 나타냅니다. 또한 QA 성능이 크게 개선되었음을 알 수 있습니다. 예를 들어 MMLU에서 38.11에서 47.49로 향상되었습니다. 이는 더 큰 모델이 일반적으로 더 나은 지식 활용 및 추론 기능[33, 55]을 가지고 있어 더 복잡한 질문에 정확하게 답할 수 있기 때문일 것입니다.