1. To make the parsing of each step easier, we few-shot re-generate 15k answers for GSM8k and MATH with an Alpha version of WizardLM 70B model to produce solutions in a step-by-step format, then find out those with a correct answer, and use this data to finetune base Llama model. 2. To enhance the model's ability to adhere to the neural and diverse instructions, we also sample 1.5k open-domain conversations from WizardLM's training data, then merge it with above math corpus as the final SFT training data.
1. 각 단계의 구문 분석을 쉽게 하기 위해 Alpha 버전의 WizardLM 70B 모델로 GSM8k 및 MATH에 대한 15k 답변을 few-shot으로 재생성하여 단계별 형식으로 솔루션을 생성한 다음 정답이 있는 답변을 찾아 이 데이터를 사용하여 기본 Llama 모델을 Fine-tuning합니다. 2. 모델이 신경과 다양한 Instruction을 준수하는 능력을 향상시키기 위해 WizardLM의 학습 데이터에서 1.5k 개의 오픈 도메인 대화를 샘플링한 다음 위의 수학 말뭉치와 병합하여 최종 Supervised Fine-tuning (SFT) 학습 데이터로 사용합니다.
1. 각 단계의 구문 분석을 쉽게 하기 위해 알파 버전의 WizardLM 70B 모델로 GSM8k 및 MATH에 대한 15k 답변을 몇 번 더 생성하여 단계별 형식으로 솔루션을 생성한 다음 정답이 있는 답변을 찾아 이 데이터를 사용하여 기본 Llama 모델을 미세 조정합니다. 2. 모델이 신경과 다양한 지침을 준수하는 능력을 향상시키기 위해 WizardLM의 학습 데이터에서 1.5k 개의 오픈 도메인 대화를 샘플링한 다음 위의 수학 말뭉치와 병합하여 최종 SFT 학습 데이터로 사용합니다.