For the training of the model variants, we utilized two distinct codebases: Axolot7 for the initial pre-training phase and LLaMA-Factory8(hiyouga, 2023) for subsequent fine-tuning. These codebases provided a strong and reliable base for our training process.
모델 변형을 훈련하기 위해 초기 사전 훈련 단계에는 Axolot7, 후속 Fine-tuning에는 LLaMA-Factory8(hiyouga, 2023)의 두 가지 코드베이스를 사용했습니다. 이러한 코드베이스는 훈련 프로세스를 위한 강력하고 안정적인 기반을 제공했습니다.
모델 변형을 훈련하기 위해 초기 사전 훈련 단계에는 Axolot7, 후속 미세 조정에는 LLaMA-Factory8(hiyouga, 2023)의 두 가지 코드베이스를 사용했습니다. 이러한 코드베이스는 훈련 프로세스를 위한 강력하고 안정적인 기반을 제공했습니다.