The recent NLP literature has witnessed a tremendous amount of activity in building models that can follow natural language instructions (Mishra et al., 2022; Wei et al., 2022; Sanh et al., 2022; Wang et al., 2022; Ouyang et al., 2022; Chung et al., 2022, i.a.). These developments are powered by two key components: large pretrained language models (LM) and human-written instruction data (e.g., PromptSource (Bach et al., 2022) and SuperNaturalInstructions (Wang et al., 2022, SuperNI for short)).
최근 NLP 문헌에는 자연어 instructions을 따를 수 있는 모델을 구축하는 데 엄청난 양의 활동이 이루어지고 있습니다(Mishra et al., 2022; Wei et al., 2022; Sanh et al., 2022; Wang et al., 2022; Ouyang et al., 2022; Chung et al., 2022, i.a.). 이러한 발전은 두 가지 핵심 구성 요소에 의해 구동됩니다: 사전 학습된 Large Language Models (LMs)와 사람이 작성한 instruction 데이터(예: PromptSource(Bach et al., 2022) 및 SuperNaturalInstructions(Wang et al., 2022, SuperNI for short))입니다.
최근 NLP 문헌에는 자연어 명령을 따를 수 있는 모델을 구축하는 데 엄청난 양의 활동이 이루어지고 있습니다(Mishra et al., 2022; Wei et al., 2022; Sanh et al., 2022; Wang et al., 2022; Ouyang et al., 2022; Chung et al., 2022, i.a.). 이러한 발전은 두 가지 핵심 구성 요소에 의해 구동됩니다: 사전 학습된 대규모 언어 모델(LM)과 사람이 작성한 명령 데이터(예: PromptSource(Bach et al., 2022) 및 SuperNaturalInstructions(Wang et al., 2022, SuperNI for short))입니다.