Furthermore, our experiments predominantly utilized SOLAR 10.7B models, driven by the state-of-the-art performance at the time of experimentation along with its unique 10.7 billion parameter size. The unique size of SOLAR 10.7B models made the usage of sDPO more necessary as there are far fewer open source LLMs that can be adopted as reference models.
게다가, 우리의 실험은 주로 SOLAR 10.7B 모델을 사용했는데, 이는 실험 당시의 최첨단 성능과 고유한 107억 개의 파라미터 크기 때문입니다. SOLAR 10.7B 모델의 독특한 크기는 참조 모델로 채택할 수 있는 오픈 소스 LLM이 훨씬 적기 때문에 sDPO의 사용을 더욱 필요하게 만들었습니다.
또한, 저희의 실험은 주로 실험 당시 최신 성능과 107억 개의 독특한 파라미터 크기로 구동되는 SOLAR 10.7B 모델을 활용했습니다. SOLAR 10.7B 모델의 고유한 크기는 참조 모델로 채택할 수 있는 오픈 소스 LLM이 훨씬 적기 때문에 sDPO의 사용이 더욱 필요했습니다.