Instruction-tuned GPT3 models.We evaluate InstructGPT (Ouyang et al., 2022), which is developed by OpenAI based on GPT3 to follow human instructions better and has been found by the community to have impressive zero-shot abilities. There are various generations of these models, where newer ones use more expansive data or algorithmic novelties.10 For our SuperNI experiments in SS4.3, we only compare with their text-davinci-001 engine, because their newer engines are trained with the latest user data and are likely to have already seen the SuperNI test set. For our human evaluation on newly written instructions, we include their 001, 002 and 003 engines for completeness.
명령어를 조정한 GPT3 모델. OpenAI에서 GPT3를 기반으로 개발하여 인간의 지시를 더 잘 따르도록 설계된 InstructGPT(Ouyang et al., 2022)를 평가했으며, 커뮤니티에서 인상적인 zero-shot 능력을 가지고 있는 것으로 밝혀졌습니다. 이러한 모델에는 다양한 세대가 있으며, 최신 모델은 더 광범위한 데이터 또는 알고리즘의 새로움을 사용합니다. SS4.3의 SuperNI 실험에서는 최신 사용자 데이터로 학습되고 SuperNI 테스트 세트를 이미 보았을 가능성이 높은 최신 엔진을 사용하지 않고 text-davinci-001 엔진만 비교합니다. 새로 작성된 instruction에 대한 인간 평가의 경우, 완전성을 위해 001, 002 및 003 엔진을 포함합니다.
명령어를 조정한 GPT3 모델.OpenAI에서 GPT3를 기반으로 개발하여 인간의 지시를 더 잘 따르도록 설계된 InstructGPT(Ouyang et al., 2022)를 평가했으며, 커뮤니티에서 인상적인 제로 샷 능력을 가지고 있는 것으로 밝혀졌습니다. 이러한 모델에는 다양한 세대가 있으며, 최신 모델은 더 광범위한 데이터 또는 알고리즘의 새로움을 사용합니다.10 SS4.3의 SuperNI 실험에서는 최신 사용자 데이터로 학습되고 SuperNI 테스트 세트를 이미 보았을 가능성이 높은 최신 엔진을 사용하지 않고 텍스트-다빈치-001 엔진만 비교합니다. 새로 작성된 명령어에 대한 인간 평가의 경우, 완전성을 위해 001, 002 및 003 엔진을 포함합니다.