Continual TrainingThe dataset is composed of approximately 800 billion tokens across two stages, with around 70% having been recently collected and carefully selected. We have enhanced the code coverage in the final stage to improve code performance.
지속적인 훈련 데이터 세트는 두 단계로 구성되며, 약 800 billion 개의 tokens으로 구성되며, 약 70%는 최근에 수집하고 신중하게 선택한 tokens입니다. 최종 단계에서 코드 커버리지를 개선하여 코드 성능을 개선했습니다.
지속적인 훈련데이터 세트는 두 단계로 구성되며, 약 8,000억 개의 토큰으로 구성되며, 약 70%는 최근에 수집하고 신중하게 선택한 토큰입니다. 최종 단계에서 코드 커버리지를 개선하여 코드 성능을 개선했습니다.