GPT-1 [50] demonstrates for the first time that good performance over a wide range of natural language tasks can be obtained by Generative Pre-Training (GPT) of a decoder-only Transformer model on a diverse corpus of unlabeled text in a self-supervised learning fashion (i.e., next word/token predic
GPT-1 [50]은 self-supervised learning 방식(즉, 다음 단어/토큰 예측)으로 다양한 레이블이 없는 텍스트 코퍼스에 대한 decoder-only Transformer 모델의 Generative Pre-Training (GPT)을 통해 광범위한 자연어 작업에서 우수한 성능을 얻을 수 있음을 처음으로 입증했습니다.
GPT-1 [50]은 자가 지도 학습 방식(즉, 다음 단어/토큰 예측)으로 다양한 레이블이 없는 텍스트 코퍼스에 대한 디코더 전용 트랜스포머 모델의 생성적 사전 학습(GPT)을 통해 광범위한 자연어 작업에서 우수한 성능을 얻을 수 있음을 처음으로 입증했습니다.