Expanding the Use of SLM SLM may be extended to supervised fine-tuning to address the noise and distribution mismatches in many SFT datasets. Another potential application is alignment, _e.g.,_ by training a reference model to emphasize helpfulness, truthfulness, and harmlessness, we may obtain a base model that is natively aligned during the pretraining stage.
SLM의 사용 확장 SLM은 많은 Supervised Fine-tuning (SFT) 데이터 세트의 노이즈 및 분포 불일치를 해결하기 위해 감독 미세 조정으로 확장될 수 있습니다. 또 다른 잠재적 응용 분야는 정렬, _예를 들어_ 참조 모델을 훈련하여 유용성, 진실성 및 무해성을 강조함으로써 사전 학습 단계에서 기본적으로 정렬된 기본 모델을 얻을 수 있습니다.
SLM의 사용 확장SLM은 많은 SFT 데이터 세트의 노이즈 및 분포 불일치를 해결하기 위해 감독 미세 조정으로 확장될 수 있습니다. 또 다른 잠재적 응용 분야는 정렬, _예를 들어_ 참조 모델을 훈련하여 유용성, 진실성 및 무해성을 강조함으로써 사전 학습 단계에서 기본적으로 정렬된 기본 모델을 얻을 수 있습니다.