Figure 7: Human evaluation performance of GPT3SELF-INST models tuned with different sizes of instructions. \(x\)-axis is in log scale. The smallest size is 175, where only the seed tasks are used for instruction tuning. We also evaluate whether improving the data quality will further improve the performance by distilling the outputs from InstructGPT003. We see consistent improvement from using larger data with better quality.
그림 7: 다양한 크기의 instructions로 조정된 GPT3SELF-INST 모델의 인간 평가 성능. \(x\)-축은 로그 스케일입니다. 가장 작은 크기는 175이며, 시드 작업만 instruction tuning에 사용됩니다. 또한 InstructGPT003의 출력을 증류하여 데이터 품질을 개선하면 성능이 더욱 향상되는지 평가합니다. 더 나은 품질의 더 큰 데이터를 사용하면 지속적으로 성능이 향상되는 것을 확인했습니다.
그림 7: 다양한 크기의 명령어로 조정된 GPT3SELF-INST 모델의 인간 평가 성능. x\)-축은 로그 스케일입니다. 가장 작은 크기는 175이며, 시드 작업만 명령어 튜닝에 사용됩니다. 또한 InstructGPT003의 출력을 증류하여 데이터 품질을 개선하면 성능이 더욱 향상되는지 평가합니다. 더 나은 품질의 더 큰 데이터를 사용하면 지속적으로 성능이 향상되는 것을 확인했습니다.