**General Text Data.** As we can see in Figure 6, the vast majority of LLMs adopt general-purpose pre-training data, such as webpages, books, and conversational text, which provides rich text sources on a variety of topics. Next, we briefly summarize three important kinds of general data.
**일반 텍스트 데이터.** Figure 6에서 볼 수 있듯이, 대부분의 LLM은 웹페이지, 책, 대화 텍스트와 같은 범용 사전 학습 데이터를 채택하여 다양한 주제에 대한 풍부한 텍스트 소스를 제공합니다. 다음으로, 세 가지 중요한 일반 데이터 유형을 간략히 요약합니다.
**일반 텍스트 데이터.** 그림 6에서 볼 수 있듯이, 대다수의 LLM은 웹 페이지, 책, 대화 텍스트와 같은 범용 사전 학습 데이터를 채택하고 있으며, 이는 다양한 주제에 대한 풍부한 텍스트 소스를 제공합니다. 다음으로 일반 데이터의 세 가지 중요한 종류를 간략하게 요약합니다.