How to improve upon SLM?There are many natural extensions of SLM, _e.g.,_ reweighting tokens instead of selecting may improve robustness; using a reference model as a reward model to guide pretraining with reinforcement learning; adopting multiple reference models to reduce overfitting; designing token-level curriculum learning and iterative strategies for continuous improvements, _etc._
SLM을 개선하는 방법 SLM에는 많은 자연 확장이 가능합니다(예: 토큰을 선택하는 대신 가중치를 부여하면 robustness가 향상될 수 있습니다; 참조 모델을 보상 모델로 사용하여 Reinforcement Learning으로 사전 학습을 안내합니다; 다중 참조 모델을 채택하여 과적합을 줄입니다; 토큰 수준 curriculum learning 및 반복 전략을 설계하여 지속적으로 개선하는 등의 방법이 있습니다.
SLM을 개선하는 방법SLM에는 많은 자연 확장이 가능합니다(예: 토큰을 선택하는 대신 가중치를 부여하면 견고성이 향상될 수 있습니다; 참조 모델을 보상 모델로 사용하여 강화 학습으로 사전 학습을 안내합니다; 다중 참조 모델을 채택하여 과적합을 줄입니다; 토큰 수준 커리큘럼 학습 및 반복 전략을 설계하여 지속적으로 개선하는 등의 방법이 있습니다.