Large Language Models (LLMs) exhibit outstanding capabilities in executing tasks that demand extensive memorization of factual data (Chowdhery et al., 2023). However, their memorization capabilities are constrained when dealing with less frequent entities (Mallen et al., 2023; Kandpal et al., 2023; Sun et al., 2023), and even the largest models may encounter the well-known "hallucination" problem (Shuster et al., 2021) and temporal degradation (Kasai et al., 2022). Consequently, when LLMs are intended for deployment in less resourced domains, customization becomes imperative to ensure optimal performance. A common example is within the industrial setup, where chatbots or Question Answering (QA) systems need to accurately answer users' questions about a proprietary knowledge graph or intra-company terminology with limited textual description.
대규모 언어 모델(LLMs)은 광범위한 사실 데이터를 기억해야 하는 작업을 수행하는 데 뛰어난 능력을 보여줍니다(Chowdhery et al., 2023). 그러나 빈도가 낮은 엔티티를 다룰 때는 암기 능력이 제한됩니다(Mallen et al., 2023; Kandpal et al., 2023; Sun et al., 2023), 가장 큰 모델에서도 잘 알려진 "hallucination" 문제(Shuster et al., 2021)와 시간적 저하(Kasai et al., 2022)를 경험할 수 있습니다. 따라서 리소스가 적은 도메인에 LLMs을 배포하려는 경우 최적의 성능을 보장하기 위해 사용자 지정이 필수적입니다. 일반적인 예로는 챗봇이나 Question Answering (QA) 시스템이 제한된 텍스트 설명으로 독점 지식 그래프 또는 회사 내 용어에 대한 사용자의 질문에 정확하게 답변해야 하는 산업 환경을 들 수 있습니다.
대규모 언어 모델(LLM)은 광범위한 사실 데이터를 기억해야 하는 작업을 수행하는 데 뛰어난 능력을 보여줍니다(Chowdhery et al., 2023). 그러나 빈도가 낮은 엔티티를 다룰 때는 암기 능력이 제한됩니다(Mallen et al., 2023; Kandpal et al., 2023; Sun et al., 2023), 가장 큰 모델에서도 잘 알려진 "환각" 문제(Shuster et al., 2021)와 시간적 저하(Kasai et al., 2022)를 경험할 수 있습니다. 따라서 리소스가 적은 도메인에 LLM을 배포하려는 경우 최적의 성능을 보장하기 위해 사용자 지정이 필수적입니다. 일반적인 예로는 챗봇이나 질의응답(QA) 시스템이 제한된 텍스트 설명으로 독점 지식 그래프 또는 회사 내 용어에 대한 사용자의 질문에 정확하게 답변해야 하는 산업 환경을 들 수 있습니다.