The PaLM (Pathways Language Model) family are developed by Google. The first PaLM model [31] was announced in April 2022 and remained private until March 2023. It is a 540B parameter transformer-based LLM. The model is pre-trained on a high-quality text corpus consisting of 780 billion tokens that comprise a wide range of natural language tasks and use cases.
PaLM (Pathways Language Model) 제품군은 Google에서 개발했습니다. 첫 번째 PaLM 모델[31]은 2022년 4월에 발표되었으며 2023년 3월까지 비공개로 유지되었습니다. 540B 파라미터 Transformer 기반 LLM입니다. 이 모델은 다양한 자연어 작업과 사용 사례를 구성하는 7,800억 개의 토큰으로 구성된 고품질 텍스트 코퍼스에 대해 사전 학습을 거쳤습니다.
PaLM(경로 언어 모델) 제품군은 Google에서 개발했습니다. 첫 번째 PaLM 모델[31]은 2022년 4월에 발표되었으며 2023년 3월까지 비공개로 유지되었습니다. 540B 파라미터 트랜스포머 기반 LLM입니다. 이 모델은 다양한 자연어 작업과 사용 사례를 구성하는 7,800억 개의 토큰으로 구성된 고품질 텍스트 코퍼스에 대해 사전 학습을 거쳤습니다.