Closed domain instruction fine-tuneEarly instruction-following training work [33; 10] concerns cross task generalization in LMs, where LMs are fine-tuned on a broad range of public NLP datasets and evaluated on a different set of NLP tasks. T5 [34] made the earliest attempt by training natural language processing (NLP) tasks such as question answering, document summarization, and sentiment classification together using a unified text-to-text format. Works such as FLAN [10], ExT5 [9], T0 [12], and KnowDA [35] increased the number of NLP tasks to around one hundred, with several instructions carefully designed for each task [36; 37; 38; 39]. Furthermore, works such as ZeroPrompt [11] and FLAN-T5 [13] raised the number of tasks to the thousands. These studies consistently show that fine-tuning LMs with diverse NLP task instructions enhances their performance on new tasks. However, LLMs trained with these closed-form instructions (i.e., instructions are often only for a single NLP task, and the input data form is simple) tend to fail in real-world user scenarios.
폐쇄 도메인 Instruction Fine-tuning 초기 Instruction-following 훈련 작업[33; 10]은 광범위한 공개 NLP 데이터 세트에 대해 Fine-tuning된 LM이 다른 NLP 작업 세트에 대해 평가되는 LM의 교차 작업 일반화와 관련이 있습니다. T5[34]는 질문 답변, 문서 요약, 감정 분류와 같은 자연어 처리(NLP) 작업을 통합 텍스트-텍스트 형식을 사용하여 함께 훈련하는 최초의 시도를 했습니다. FLAN [10], ExT5 [9], T0 [12], KnowDA [35]와 같은 작업은 NLP 작업의 수를 100개 정도로 늘렸으며, 각 작업에 맞게 세심하게 설계된 몇 가지 지침이 있습니다[36; 37; 38; 39]. 또한 ZeroPrompt [11] 및 FLAN-T5 [13]와 같은 연구에서는 작업 수를 수천 개로 늘렸습니다. 이러한 연구들은 다양한 NLP 작업 지침으로 LMs를 Fine-tuning하면 새로운 작업에서 성능이 향상된다는 것을 일관되게 보여줍니다. 그러나 이러한 폐쇄형 지침으로 훈련된 LLM(예: 지침이 단일 NLP 작업에만 해당하는 경우가 많고 입력 데이터 형식이 단순함)은 실제 사용자 시나리오에서 실패하는 경향이 있습니다.
폐쇄 도메인 명령 미세 조정초기 명령어 추종 훈련 작업[33; 10]은 광범위한 공개 NLP 데이터 세트에 대해 미세 조정된 LM이 다른 NLP 작업 세트에 대해 평가되는 LM의 교차 작업 일반화와 관련이 있습니다. T5[34]는 질문 답변, 문서 요약, 감정 분류와 같은 자연어 처리(NLP) 작업을 통합 텍스트-텍스트 형식을 사용하여 함께 훈련하는 최초의 시도를 했습니다. FLAN [10], ExT5 [9], T0 [12], KnowDA [35]와 같은 작업은 NLP 작업의 수를 100개 정도로 늘렸으며, 각 작업에 맞게 세심하게 설계된 몇 가지 지침이 있습니다[36; 37; 38; 39]. 또한 ZeroPrompt [11] 및 FLAN-T5 [13]와 같은 연구에서는 작업 수를 수천 개로 늘렸습니다. 이러한 연구들은 다양한 NLP 작업 지침으로 LMs를 미세 조정하면 새로운 작업에서 성능이 향상된다는 것을 일관되게 보여줍니다. 그러나 이러한 폐쇄형 지침으로 훈련된 LLM(예: 지침이 단일 NLP 작업에만 해당하는 경우가 많고 입력 데이터 형식이 단순함)은 실제 사용자 시나리오에서 실패하는 경향이 있습니다.