For downstream accuracy, we chose to match the exact downstream evaluation done in Zhang et al. [59] since we use OPT architecture and hyperparameters. Similar to Zhang et al. [59], we notice considerable variability across the 16 NLP tasks in Figure A3, motivating us to look at the mean downstream accuracy across tasks.
다운스트림 정확도의 경우, 우리는 OPT architecture와 hyperparameters를 사용하기 때문에 Zhang et al. [59]에서 수행한 정확한 다운스트림 평가를 따라 하기로 결정했습니다. Zhang et al. [59]와 마찬가지로 그림 A3의 16개 NLP 작업에 걸쳐 상당한 변동성이 있음을 확인하여 작업 간 평균 다운스트림 정확도를 살펴볼 동기를 부여했습니다.
다운스트림 정확도의 경우, OPT 아키텍처와 하이퍼파라미터를 사용하기 때문에 Zhang et al. [59]에서 수행한 정확한 다운스트림 평가를 따라 하기로 결정했습니다. Zhang et al. [59]와 마찬가지로 그림 A3의 16개 NLP 작업에 걸쳐 상당한 변동성이 있음을 확인하여 작업 간 평균 다운스트림 정확도를 살펴볼 동기를 부여했습니다.