al [30] build medical LLMs through continual pre-training LLaMA [27] on medical papers. However, they do not evaluate the model's quantitative performance in a non-fine tuning setting. In this work, we measure the model's performance in an in-context learning setting, showing the clear benefits of continual pre-training.
al [30]은 의학 논문에 대한 지속적인 사전 학습 LLaMA [27]를 통해 의학 LLM을 구축합니다. 그러나 그들은 Fine-tuning이 아닌 설정에서 모델의 정량적 성능을 평가하지 않습니다. 이 연구에서는 In-Context Learning 설정에서 모델의 성능을 측정하여 지속적인 사전 학습의 분명한 이점을 보여줍니다.
al [30]은 의학 논문에 대한 지속적인 사전 학습 LLaMA [27]를 통해 의학 LLM을 구축합니다. 그러나 그들은 미세 조정이 아닌 설정에서 모델의 정량적 성능을 평가하지 않습니다. 이 연구에서는 인컨텍스트 학습 설정에서 모델의 성능을 측정하여 지속적인 사전 학습의 분명한 이점을 보여줍니다.