\(\bullet\)_Underperforming specialized generation._ Although LLMs have learned general language patterns to generate coherent text, their proficiency in generation might be constrained when dealing with a specialized domain or task. For instance, a language model that has been trained on general web articles may face challenges when generating a medical report which involves many medical jargon and methods. Intuitively, domain knowledge should be critical for model specialization. However, it is not easy to inject such specialized knowledge into LLMs. As discussed in recent analyses [47, 648], when LLMs are trained to exhibit some specific ability that allows them to excel in some areas, they might struggle in others. Such an issue is related to _catastrophic forgetting_[649, 650] in training neural networks, which refers to the conflict phenomenon of integrating new and old knowledge. Similar cases also occur in human alignment of LLMs, where _"alignment tax"_[66] (_e.g.,_ a potential loss in the in-context learning ability) has to be paid for aligning to human values and needs. Moreover, due to the limitations of sequence modeling architecture, LLMs still face challenges in the understanding and generation of structured data. Consequently, they often fall behind task-specific models on complex structured data tasks, such as knowledge-base question answering and semantic parsing [651, 458]. Therefore, it is important to develop effective model specialization methods that can flexibly adapt LLMs to various task scenarios, meanwhile retaining the original abilities as possible.
\(\bullet\)_성능이 저조한 특수 생성._ LLM은 일관성 있는 텍스트를 생성하기 위해 일반적인 언어 패턴을 학습했지만, 특수 도메인이나 작업을 처리할 때는 생성 능력이 제한될 수 있습니다. 예를 들어, 일반 웹 기사를 학습한 언어 모델은 많은 의학 전문 용어와 방법이 포함된 의료 보고서를 생성할 때 어려움을 겪을 수 있습니다. 직관적으로 도메인 지식은 모델 전문화에 매우 중요해야 합니다. 그러나 이러한 전문 지식을 LLM에 주입하는 것은 쉽지 않습니다. 최근 분석[47, 648]에서 논의한 바와 같이, LLM이 일부 영역에서 뛰어난 능력을 발휘할 수 있도록 특정 능력을 갖추도록 훈련하면 다른 영역에서는 어려움을 겪을 수 있습니다. 이러한 문제는 신경망 훈련에서 _catastrophic forgetting_[649, 650]과 관련이 있는데, 이는 새로운 지식과 기존 지식을 통합하는 갈등 현상을 말합니다. 이러한 사례는 인간의 가치와 필요에 맞추기 위해 _"alignment tax"_[66](_예:_ In-Context Learning 능력의 잠재적 손실)을 지불해야 하는 LLM의 인간 정렬에서도 발생합니다. 또한, 시퀀스 모델링 아키텍처의 한계로 인해 LLM은 여전히 구조화된 데이터의 이해와 생성에 어려움을 겪고 있습니다. 따라서 지식 기반 질의응답 및 시맨틱 구문 분석[651, 458]과 같은 복잡한 구조화된 데이터 작업에서 종종 작업별 모델에 뒤처집니다. 따라서 다양한 작업 시나리오에 LLM을 유연하게 적용하는 동시에 원래의 능력을 최대한 유지할 수 있는 효과적인 모델 전문화 방법을 개발하는 것이 중요합니다.
\(\bullet\)_성능이 저조한 특수 생성._ LLM은 일관성 있는 텍스트를 생성하기 위해 일반적인 언어 패턴을 학습했지만, 특수 도메인이나 작업을 처리할 때는 생성 능력이 제한될 수 있습니다. 예를 들어, 일반 웹 기사를 학습한 언어 모델은 많은 의학 전문 용어와 방법이 포함된 의료 보고서를 생성할 때 어려움을 겪을 수 있습니다. 직관적으로 도메인 지식은 모델 전문화에 매우 중요해야 합니다. 그러나 이러한 전문 지식을 LLM에 주입하는 것은 쉽지 않습니다. 최근 분석[47, 648]에서 논의한 바와 같이, LLM이 일부 영역에서 뛰어난 능력을 발휘할 수 있도록 특정 능력을 갖추도록 훈련하면 다른 영역에서는 어려움을 겪을 수 있습니다. 이러한 문제는 신경망 훈련에서 _재앙적 망각_[649, 650]과 관련이 있는데, 이는 새로운 지식과 기존 지식을 통합하는 갈등 현상을 말합니다. 이러한 사례는 인간의 가치와 필요에 맞추기 위해 _"정렬 세금"_[66](_예:_ 인컨텍스트 학습 능력의 잠재적 손실)을 지불해야 하는 LLM의 인간 정렬에서도 발생합니다. 또한, 시퀀스 모델링 아키텍처의 한계로 인해 LLM은 여전히 구조화된 데이터의 이해와 생성에 어려움을 겪고 있습니다. 따라서 지식 기반 질의응답 및 시맨틱 구문 분석[651, 458]과 같은 복잡한 구조화된 데이터 작업에서 종종 작업별 모델에 뒤처집니다. 따라서 다양한 작업 시나리오에 LLM을 유연하게 적용하는 동시에 원래의 능력을 최대한 유지할 수 있는 효과적인 모델 전문화 방법을 개발하는 것이 중요합니다.