The GPT family is one of the most common examples of AutoRegressive language models. It was first proposed by Radford et al. (2018), who identified a basic architecture of unsupervised pre-training followed by fine-tuning. Radford et al. (2019) later proposed zero-shot learning based on GPT. Later, Brown et al. (2020) proposed GPT-3 using an approach similar to Radford et al. (2019), which involved scaling up and abandoning fine-tuning. They also utilized alternately dense and locally banded sparse attentional patterns in the transformer layer, similar to the sparse transformer Child et al. (2019). There are also several related studies, such as GPT-NEO(Black et al., 2022) and ChatGPT, which use Reinforcement Learning from Human Feedback (RLHF). RLHF has significantly enhanced the accuracy of GPT models. Although ChatGPT is not open source, many researchers Jiang et al. (2023) (Khattab et al., 2022) still use its API for generative tasks in RALM. Recently, report on GPT-4(Achiam et al., 2023) have appeared, with the main focus on building a predictable and scalable deep learning stack dedicated to improving GPT-4's safety and alignment. Many researchers Asai et al. (2023) (Luo et al., 2023) have recently used GPT-4 to generate prompts for RALM.
GPT 제품군은 AutoRegressive 언어 모델의 가장 일반적인 예 중 하나입니다. Radford 등(2018)이 처음 제안했으며, 이들은 미지도 사전 학습에 이어 Fine-tuning을 거치는 기본 아키텍처를 확인했습니다. Radford 등(2019)은 이후 GPT를 기반으로 한 zero-shot 학습을 제안했습니다. 이후 Brown 등(2020)은 Radford 등(2019)과 유사한 접근 방식을 사용하여 GPT-3를 제안했는데, 이는 규모를 확장하고 Fine-tuning을 포기하는 방식이었습니다. 또한 sparse Transformer Child 등(2019)과 유사하게 Transformer 레이어에 교호적으로 조밀하고 국부적으로 밴드가 있는 sparse attention 패턴을 활용했습니다. GPT-NEO(Black et al., 2022) 및 ChatGPT와 같은 몇 가지 관련 연구도 있으며, 이 연구들은 Reinforcement Learning from Human Feedback (RLHF)을 사용합니다. RLHF는 GPT 모델의 정확도를 크게 향상시켰습니다. ChatGPT는 오픈 소스가 아니지만, 많은 연구자들이 Jiang et al. (2023) (Khattab et al., 2022)은 여전히 RALM의 생성 작업에 ChatGPT의 API를 사용합니다. 최근에는 GPT-4(Achiam et al., 2023)에 대한 보고서가 등장했으며, 주요 초점은 GPT-4의 안전성과 정렬을 개선하기 위한 예측 가능하고 확장 가능한 딥 러닝 스택 구축에 있습니다. 많은 연구자들이 Asai 등(2023) (Luo 등, 2023)은 최근 RALM에 대한 프롬프트를 생성하기 위해 GPT-4를 사용했습니다.
GPT 제품군은 자동 회귀 언어 모델의 가장 일반적인 예 중 하나입니다. Radford 등(2018)이 처음 제안했으며, 이들은 미지도 사전 학습에 이어 미세 조정을 거치는 기본 아키텍처를 확인했습니다. Radford 등(2019)은 이후 GPT를 기반으로 한 제로 샷 학습을 제안했습니다. 이후 Brown 등(2020)은 Radford 등(2019)과 유사한 접근 방식을 사용하여 GPT-3를 제안했는데, 이는 규모를 확장하고 미세 조정을 포기하는 방식이었습니다. 또한 스파스 트랜스포머 Child 등(2019)과 유사하게 트랜스포머 레이어에 교호적으로 조밀하고 국부적으로 밴드가 있는 스파스 주의 패턴을 활용했습니다. GPT-NEO(Black et al., 2022) 및 ChatGPT와 같은 몇 가지 관련 연구도 있으며, 이 연구들은 인간 피드백(RLHF)을 통한 강화 학습을 사용합니다. RLHF는 GPT 모델의 정확도를 크게 향상시켰습니다. ChatGPT는 오픈 소스가 아니지만, 많은 연구자들이 Jiang et al. (2023) (Khattab et al., 2022)은 여전히 RALM의 생성 작업에 ChatGPT의 API를 사용합니다. 최근에는 GPT-4(Achiam et al., 2023)에 대한 보고서가 등장했으며, 주요 초점은 GPT-4의 안전성과 정렬을 개선하기 위한 예측 가능하고 확장 가능한 딥 러닝 스택 구축에 있습니다. 많은 연구자들이 Asai 등(2023) (Luo 등, 2023)은 최근 RALM에 대한 프롬프트를 생성하기 위해 GPT-4를 사용했습니다.