For supervised fine-tuning, we employ the Adam optimizer with a cosine learning rate schedule spanning a total of 3 epochs of training. The maximum learning rate is set 2e-5 (except that 2e-6 for the Mistral-7b model) and there is a 4% linear warm-up. The maximum token length is set 2048, and the Vicuna-v1.1 Zheng et al. (2023) system prompt is used. All experiments are conducted on 8\(\times\)Nvidia H100 GPUs. Our most resource-intensive experiment, involving a 70B model and 960K data points, takes 1900 H100 GPU hours.
지도 **Supervised Fine-tuning**의 경우, 총 3회의 에포크에 걸쳐 코사인 **Learning Rate** 스케줄을 사용하는 Adam **Optimizer**를 사용합니다. 최대 **Learning Rate**는 2e-5로 설정되며(Mistral-7b 모델의 경우 2e-6 제외), 4% 선형 워밍업이 있습니다. 최대 토큰 길이는 2048로 설정되며, Vicuna-v1.1 Zheng et al. (2023) 시스템 프롬프트가 사용됩니다. 모든 실험은 8\(\times\)Nvidia H100 GPU에서 수행됩니다. 70B 모델과 96만 개의 데이터 포인트를 포함하는 가장 리소스 집약적인 실험은 1900시간의 H100 GPU 시간이 소요됩니다.
지도 미세 조정의 경우, 총 3회의 에포크에 걸쳐 코사인 학습 속도 스케줄을 사용하는 Adam 옵티마이저를 사용합니다. 최대 학습 속도는 2e-5로 설정되며(Mistral-7b 모델의 경우 2e-6 제외), 4% 선형 워밍업이 있습니다. 최대 토큰 길이는 2048로 설정되며, Vicuna-v1.1 Zheng et al. (2023) 시스템 프롬프트가 사용됩니다. 모든 실험은 8\(\times\)Nvidia H100 GPU에서 수행됩니다. 70B 모델과 96만 개의 데이터 포인트를 포함하는 가장 리소스 집약적인 실험은 1900시간의 H100 GPU 시간이 소요됩니다.