Large language models (LLMs) have exhibited remarkable capabilities across a wide array of natural language processing (NLP) tasks Brown et al. (2020); Ouyang et al. (2022); OpenAI (2023); Anil et al. (2023). In particular, LLMs can be trained for improved instruction-following through various methods, including fine-tuning on human-annotated data Touvron et al. (2023); Bai et al. (2022) or extracted knowledge from stronger LLMs Wang et al. (2022); Taori et al. (2023); Chiang et al. (2023); Peng et al. (2023). Recent progress in this area highlights the critical role of high-quality data in enhancing LLMs' instruction-following capabilities Zhou et al. (2023); Kopf et al. (2023); Chen et al. (2023). However, acquiring such data through human annotation remains cost-prohibitive and difficult to scale, hindering further progress.
대규모 언어 모델(LLMs)은 다양한 자연어 처리(NLP) 작업에서 놀라운 성능을 발휘하고 있습니다 Brown et al. (2020); Ouyang et al. (2022); OpenAI (2023); Anil et al. (2023). 특히, LLMs는 인간이 주석을 달은 데이터에 대한 Fine-tuning Touvron et al. (2023); Bai et al. (2022) 또는 더 강력한 LLMs에서 추출한 지식 Wang et al. (2022); Taori et al. (2023); Chiang et al. (2023); Peng et al. (2023). 이 분야의 최근 진전은 LLMs의 Instruction 수행 기능을 향상시키는 데 있어 고품질 데이터의 중요한 역할을 강조하고 있습니다 Zhou et al. (2023); Kopf et al. (2023); Chen et al. (2023). 그러나 이러한 데이터를 인간이 주석을 달아 확보하는 것은 비용이 많이 들고 확장하기 어렵기 때문에 추가적인 발전을 저해하고 있습니다.
대규모 언어 모델(LLM)은 다양한 자연어 처리(NLP) 작업에서 놀라운 성능을 발휘하고 있습니다 Brown et al. (2020); Ouyang et al. (2022); OpenAI (2023); Anil et al. (2023). 특히, LLM은 인간이 주석을 달은 데이터에 대한 미세 조정 Touvron et al. (2023); Bai et al. (2022) 또는 더 강력한 LLM에서 추출한 지식 Wang et al. (2022); Taori et al. (2023); Chiang et al. (2023); Peng et al. (2023). 이 분야의 최근 진전은 LLM의 명령어 수행 기능을 향상시키는 데 있어 고품질 데이터의 중요한 역할을 강조하고 있습니다 Zhou et al. (2023); Kopf et al. (2023); Chen et al. (2023). 그러나 이러한 데이터를 인간이 주석을 달아 확보하는 것은 비용이 많이 들고 확장하기 어렵기 때문에 추가적인 발전을 저해하고 있습니다.