In the above, we have discussed the approaches of instruction tuning and alignment tuning to adapt LLMs according to specific goals. Since LLMs consist of a huge amount of model parameters, it would be costly to perform the full-parameter tuning. In this section, we will discuss how to conduct efficient tuning on LLMs. We first review several representative parameter-efficient fine-tuning methods for Transformer language models, and then summarize existing work on parameter-efficient fine-tuned LLMs.
위에서는 특정 목표에 따라 LLM을 적응시키기 위한 Instruction Tuning과 Alignment Tuning의 접근 방식에 대해 설명했습니다. LLM은 방대한 양의 모델 파라미터로 구성되어 있기 때문에 전체 파라미터를 튜닝하는 것은 비용이 많이 들 것입니다. 이 섹션에서는 LLM에 대한 효율적인 튜닝을 수행하는 방법에 대해 설명합니다. 먼저 Transformer 언어 모델에 대한 몇 가지 대표적인 파라미터 효율적 Fine-tuning 방법을 검토한 다음, 파라미터 효율적 Fine-tuned LLM에 대한 기존 연구를 요약합니다.
위에서는 특정 목표에 따라 LLM을 적응시키기 위한 명령어 튜닝과 정렬 튜닝의 접근 방식에 대해 설명했습니다. LLM은 방대한 양의 모델 파라미터로 구성되어 있기 때문에 전체 파라미터를 튜닝하는 것은 비용이 많이 들 것입니다. 이 섹션에서는 LLM에 대한 효율적인 튜닝을 수행하는 방법에 대해 설명합니다. 먼저 트랜스포머 언어 모델에 대한 몇 가지 대표적인 파라미터 효율적 미세 조정 방법을 검토한 다음, 파라미터 효율적 미세 조정 LLM에 대한 기존 연구를 요약합니다.