**LaMDA:** In [85], Thoppilan et al. presented LaMDA, a family of Transformer-based neural language models specialized for dialog, which have up to 137B parameters and are pre-trained on 1.56T words of public dialog data and web text. They showed that fine-tuning with annotated data and enabling the model to consult external knowledge sources can lead to significant improvements towards the two key challenges of safety and factual grounding.
**LaMDA:** Thoppilan 등은 [85]에서 대화에 특화된 Transformer 기반 신경 언어 모델의 계열인 LaMDA를 소개했는데, 이 모델은 최대 137B개의 파라미터를 가지고 있으며 공개 대화 데이터 1.56T 단어와 웹 텍스트로 사전 학습되었습니다. 그들은 주석이 달린 데이터로 Fine-tuning하고 모델이 외부 지식 소스를 참조할 수 있도록 하면 안전과 사실적 근거라는 두 가지 주요 과제를 크게 개선할 수 있음을 보여주었습니다.
**LaMDA:** Thoppilan 등은 [85]에서 대화에 특화된 트랜스포머 기반 신경 언어 모델의 계열인 LaMDA를 소개했는데, 이 모델은 최대 137B개의 파라미터를 가지고 있으며 공개 대화 데이터 1.56T 단어와 웹 텍스트로 사전 학습되었습니다. 그들은 주석이 달린 데이터로 미세 조정하고 모델이 외부 지식 소스를 참조할 수 있도록 하면 안전과 사실적 근거라는 두 가지 주요 과제를 크게 개선할 수 있음을 보여주었습니다.