To ensure the quality and diversity of our data, we manually selected 13 data sources from high-quality websites and data resources within the Chinese Internet. These sources include community Q&A forums, encyclopedic sites, content creation platforms, examinations, etc. We also incorporated high-quality Chinese NLP datasets to enrich the diversity of tasks. Specifically, we categorized all data sources into four types: Social Media & forums, World Knowledge, NLP tasks, and Examinations. The data sources and their descriptions are as follows.
데이터의 품질과 다양성을 보장하기 위해, 우리는 중국 인터넷 내의 고품질 웹사이트와 데이터 자원에서 13개의 데이터 소스를 수동으로 선택했습니다. 이러한 소스에는 커뮤니티 Q&A 포럼, 백과사전 사이트, 콘텐츠 생성 플랫폼, 시험 등이 포함됩니다. 또한, 작업의 다양성을 풍부하게 하기 위해 고품질의 중국어 NLP 데이터셋도 통합했습니다. 구체적으로, 우리는 모든 데이터 소스를 네 가지 유형으로 분류했습니다: 소셜 미디어 및 포럼, 세계 지식, NLP 작업, 그리고 시험. 데이터 소스와 그 설명은 다음과 같습니다.
데이터의 품질과 다양성을 보장하기 위해 중국 인터넷 내 고품질 웹사이트와 데이터 리소스에서 13개의 데이터 소스를 수동으로 선별했습니다. 이러한 소스에는 커뮤니티 Q&A 포럼, 백과사전 사이트, 콘텐츠 제작 플랫폼, 시험 등이 포함됩니다. 또한 고품질의 중국 NLP 데이터 세트를 통합하여 작업의 다양성을 강화했습니다. 구체적으로 모든 데이터 소스를 소셜 미디어 및 포럼, 세계 지식, NLP 작업, 시험의 네 가지 유형으로 분류했습니다. 데이터 소스와 그 설명은 다음과 같습니다.