**Continual Pre-training Dataset** We construct a Traditional Chinese corpus for continual pretraining, containing 3.1B tokens sourced from publicly available materials. These sources encompass diverse domains, including news media, educational resources, Wikipedia, academic abstracts, governmental reports, Traditional Chinese Dictionary, and scientific articles.
**지속적인 Pre-training 데이터 세트** 공개적으로 사용 가능한 자료에서 가져온 3.1B 토큰을 포함하는 지속적인 Pre-training을 위한 중국어 전통어 말뭉치를 구성합니다. 이러한 소스에는 뉴스 미디어, 교육 리소스, Wikipedia, 학술 초록, 정부 보고서, 중국어 사전, 과학 논문 등 다양한 도메인이 포함됩니다.
**지속적인 사전 학습 데이터 세트** 공개적으로 사용 가능한 자료에서 가져온 3.1B 토큰을 포함하는 지속적인 사전 학습을 위한 중국어 전통어 말뭉치를 구성합니다. 이러한 소스에는 뉴스 미디어, 교육 리소스, 위키백과, 학술 초록, 정부 보고서, 중국어 사전, 과학 논문 등 다양한 도메인이 포함됩니다.