On the other hand, there are several open-source Code LLMs available. Salesforce has introduced CodeGen [13], CodeT5 [17], and CodeT5+ [18]. Tsinghua University has contributed CodeGeeX [14], and the BigCode Project has developed StarCoder [11]. These models have demonstrated notable advancements in code-related tasks. However, when compared to the SOTA closed-source models, they still lag behind significantly. In contrast to the aforementioned models without instruction fine-tuning, our work demonstrates that further training Code LLMs with Code _Evol-Instruct_ can substantially enhance performance.
반면, 오픈 소스 코드 LLM은 몇 가지가 있습니다. Salesforce는 CodeGen [13], CodeT5 [17], CodeT5+ [18]을 도입했습니다. 칭화대학교는 CodeGeeX [14]를, 빅코드 프로젝트는 StarCoder [11]를 개발했습니다. 이러한 모델은 코드 관련 작업에서 주목할 만한 발전을 보여주었습니다. 그러나 SOTA 비공개 모델과 비교하면 여전히 크게 뒤처져 있습니다. Instruction Fine-tuning이 없는 앞서 언급한 모델과는 대조적으로, 저희 연구는 Code _Evol-Instruct_로 Code LLM을 추가로 학습시키면 성능을 크게 향상시킬 수 있음을 보여줍니다.
반면, 오픈 소스 코드 LLM은 몇 가지가 있습니다. Salesforce는 CodeGen [13], CodeT5 [17], CodeT5+ [18]을 도입했습니다. 칭화대학교는 CodeGeeX [14]를, 빅코드 프로젝트는 스타코더 [11]를 개발했습니다. 이러한 모델은 코드 관련 작업에서 주목할 만한 발전을 보여주었습니다. 그러나 SOTA 비공개 모델과 비교하면 여전히 크게 뒤처져 있습니다. 명령어 미세 조정이 없는 앞서 언급한 모델과는 대조적으로, 저희 연구는 Code _Evol-Instruct_로 Code LLM을 추가로 학습시키면 성능을 크게 향상시킬 수 있음을 보여줍니다.