Results.We make the following observations from the results in Table 3. Self-Instruct boosts the instruction-following ability of GPT3 by a large margin. The vanilla GPT3 model basically cannot follow human instructions at all. Upon manual analysis, we find that it usually generates irrelevant and repetitive text, and does not know when to stop generation. Compared with other models that are not specifically trained for SuperNI, GPT3SEL-INST achieves better performance than T0 or the GPT3 finetuned on the T0 training set, which takes tremendous human labeling efforts. Notably, GPT3SEL-INST also nearly matches the performance of InstructGPT001, which is trained with private user data and human-annotated labels.
결과. 표 3의 결과에서 다음과 같은 관찰을 할 수 있습니다. Self-Instruct는 GPT3의 instruction-following 능력을 크게 향상시킵니다. 일반적인 GPT3 모델은 기본적으로 인간의 지시를 전혀 따르지 못합니다. 수동으로 분석한 결과, 일반적으로 관련 없는 반복적인 텍스트를 생성하고 언제 생성을 중지해야 할지 모르는 것으로 나타났습니다. SuperNI에 맞게 특별히 훈련되지 않은 다른 모델과 비교했을 때, GPT3SEL-INST는 엄청난 인적 라벨링 노력이 필요한 T0 훈련 세트에 대해 Fine-tuning된 GPT3 또는 T0보다 더 나은 성능을 달성했습니다. 특히, GPT3SEL-INST는 비공개 사용자 데이터와 인간이 주석을 달은 레이블로 훈련된 InstructGPT001의 성능에 거의 근접했습니다.
결과. 표 3의 결과에서 다음과 같은 관찰을 할 수 있습니다. 셀프 인스트럭트는 GPT3의 지시어 추종 능력을 크게 향상시킵니다. 일반적인 GPT3 모델은 기본적으로 인간의 지시를 전혀 따르지 못합니다. 수동으로 분석한 결과, 일반적으로 관련 없는 반복적인 텍스트를 생성하고 언제 생성을 중지해야 할지 모르는 것으로 나타났습니다. 슈퍼NI에 맞게 특별히 훈련되지 않은 다른 모델과 비교했을 때, GPT3SEL-INST는 엄청난 인적 라벨링 노력이 필요한 T0 훈련 세트에 대해 핀튜닝된 GPT3 또는 T0보다 더 나은 성능을 달성했습니다. 특히, GPT3SEL-INST는 비공개 사용자 데이터와 인간이 주석을 달은 레이블로 훈련된 InstructGPT001의 성능에 거의 근접했습니다.