**Downstream Task Accuracy.** To evaluate downstream performance of our trained models, we report average 0-shot accuracy across the 16 NLP tasks from Zhang et al. [59], and use a prompting methodology consistent with Zhang et al. [59]. These set of 16 NLP tasks include Arc Challenge and ArcEasy [12], HellaSwag [58], OpenBookQA [33], PIQA [7], StoryCloze [36], Winograd [28], Winogrande [42], as well as tasks from SuperGLUE [52]. We refer the reader to Zhang et al. [59] for more information about this evaluation setup.
**Downstream Task Accuracy.** 학습된 모델의 downstream 성능을 평가하기 위해 Zhang 등[59]의 16개 NLP 작업에 대한 평균 0-shot 정확도를 보고하고, Zhang 등[59]과 일관된 prompting 방법론을 사용합니다. 이 16개의 NLP 작업 세트에는 Arc Challenge 및 ArcEasy [12], HellaSwag [58], OpenBookQA [33], PIQA [7], StoryCloze [36], Winograd [28], Winogrande [42], SuperGLUE [52]의 작업이 포함됩니다. 이 평가 설정에 대한 자세한 내용은 Zhang 등[59]을 참조하세요.
**다운스트림 작업 정확도.** 학습된 모델의 다운스트림 성능을 평가하기 위해 Zhang 등[59]의 16개 NLP 작업에 대한 평균 0-샷 정확도를 보고하고, Zhang 등[59]과 일관된 프롬프트 방법론을 사용합니다. 이 16개의 NLP 작업 세트에는 Arc Challenge 및 ArcEasy [12], HellaSwag [58], OpenBookQA [33], PIQA [7], StoryCloze [36], Winograd [28], Winogrande [42], SuperGLUE [52]의 작업이 포함됩니다. 이 평가 설정에 대한 자세한 내용은 Zhang 등[59]을 참조하세요.