As pre-trained language models (_e.g._, BERT) have originated in the field of NLP, the technical advances of language models has an important impact on the research of NLP. In this part, we discuss the application of LLMs on five kinds of classic NLP tasks, including word-level, sentence-level, sequence tagging, relation extraction, and text generation tasks, which had been the foundation of many existing NLP systems and applications. Note that we do not intend to comprehensively cover all NLP tasks, but instead try to analyze the impact of LLMs for fundamental NLP research through the basic tasks. We also omit the discussion of several tasks (_e.g._, language modeling) that have been discussed early in this survey.
사전 학습된 언어 모델(_예: BERT)이 자연어 처리(NLP) 분야에서 시작되었기 때문에 언어 모델의 기술적 발전은 NLP 연구에 중요한 영향을 미칩니다. 이 부분에서는 단어 수준, 문장 수준, sequence tagging, relation extraction, text generation 작업 등 기존 많은 NLP 시스템과 애플리케이션의 기반이 되어 온 다섯 가지의 고전적인 NLP 작업에 LLM을 적용하는 방법에 대해 논의합니다. 모든 NLP 작업을 포괄적으로 다루려는 것이 아니라 기본 작업을 통해 LLM이 기초 NLP 연구에 미치는 영향을 분석하고자 합니다. 또한 이 조사에서 초기에 논의된 몇 가지 작업(_예: language modeling)에 대한 논의는 생략합니다.
사전 학습된 언어 모델(_예: BERT)이 자연어 처리 분야에서 시작되었기 때문에 언어 모델의 기술적 발전은 자연어 처리 연구에 중요한 영향을 미칩니다. 이 부분에서는 단어 수준, 문장 수준, 시퀀스 태깅, 관계 추출, 텍스트 생성 작업 등 기존 많은 자연어 처리 시스템과 애플리케이션의 기반이 되어 온 다섯 가지의 고전적인 자연어 처리 작업에 LLM을 적용하는 방법에 대해 논의합니다. 모든 자연어 처리 작업을 포괄적으로 다루려는 것이 아니라 기본 작업을 통해 LLM이 기초 자연어 처리 연구에 미치는 영향을 분석하고자 합니다. 또한 이 조사에서 초기에 논의된 몇 가지 작업(예: 언어 모델링)에 대한 논의는 생략합니다.