As an important resource, the library _PEFT_[411] (standing for parameter-efficient fine-tuning) has been released on GitHub34. It has included several widely used efficient tuning methods, including LoRA [145]/AdaLoRA [406], prefixtuning [396, 401], P-Tuning [402], and prompt-tuning [397]. Further, it supports a number of language models such as GPT-2 and LLaMA, and also covers several representative vision Transformer models (_e.g._, VIT and Swin Transformer).
중요한 리소스로서, 파라미터 효율적 Fine-tuning(parameter-efficient fine-tuning)을 의미하는 _PEFT_[411] 라이브러리가 GitHub34에 공개되었습니다. 여기에는 LoRA [145]/AdaLoRA [406], prefixtuning [396, 401], P-Tuning [402], 그리고 prompt-tuning [397] 등 널리 사용되는 몇 가지 효율적인 튜닝 방법이 포함되어 있습니다. 또한 GPT-2 및 LLaMA와 같은 여러 언어 모델을 지원하며, 대표적인 비전 Transformer 모델(_예: VIT 및 Swin Transformer)도 지원합니다.
중요한 리소스로서, 파라미터 효율적 미세 조정(parameter-efficient fine-tuning)을 의미하는 _PEFT_[411] 라이브러리가 GitHub34에 공개되었습니다. 여기에는 LoRA [145]/AdaLoRA [406], 프리픽스 튜닝 [396, 401], P-튜닝 [402], 프롬프트 튜닝 [397] 등 널리 사용되는 몇 가지 효율적인 튜닝 방법이 포함되어 있습니다. 또한 GPT-2 및 LLaMA와 같은 여러 언어 모델을 지원하며, 대표적인 비전 트랜스포머 모델(_예: VIT 및 Swin 트랜스포머)도 지원합니다.