In particular, LoRA [145] has been widely applied to open-source LLMs (_e.g.,_ LLaMA and BLOOM) forparameter-efficient fine-tuning. Among these research attempts, LLaMA and its variants have gained much attention for parameter-efficient tuning. For example, Alpaca-LoRA [144] has been trained using LoRA as a lightweight tuned version of Alpaca [142] (a fine-tuned 7B LLaMA model with 52K human demonstrations of instruction following). There are extensive explorations of Alpaca-LoRA ranging in different languages or model sizes, which can be found in the collection page33. A recent study LLaMA-Adapter [409] inserts learnable prompt vectors into each Transformer layer, in which zero-initialized attention has been proposed to improve the training by mitigating the influence of under-fitted prompt vectors. They also extend this approach to a multi-modal setting, _e.g._, visual question answering.
특히, LoRA [145]는 파라미터 효율적인 Fine-tuning을 위해 오픈 소스 LLM(_예:_ LLaMA 및 BLOOM)에 널리 적용되었습니다. 이러한 연구 시도 중에서 LLaMA와 그 변형은 파라미터 효율적 튜닝에 많은 관심을 받았습니다. 예를 들어, Alpaca-LoRA [144]는 Alpaca [142]의 경량 튜닝 버전으로 LoRA를 사용하여 훈련되었습니다(Instruction 수행에 대한 52,000개의 인간 데모가 있는 7B LLaMA 모델을 Fine-tuning한 모델). 다양한 언어 또는 모델 크기에서 Alpaca-LoRA에 대한 광범위한 탐색이 이루어졌으며, 이는 컬렉션 페이지33에서 확인할 수 있습니다. 최근 연구인 LLaMA-Adapter [409]는 학습 가능한 프롬프트 벡터를 각 Transformer 레이어에 삽입하는데, 여기서 제로 초기화된 Attention은 적합하지 않은 프롬프트 벡터의 영향을 완화하여 훈련을 개선하기 위해 제안되었습니다. 또한 이 접근 방식을 멀티모달 설정, _예를 들어 시각적 질문 답변에 확장했습니다.
특히, LoRA [145]는 파라미터 효율적인 미세 조정을 위해 오픈 소스 LLM(_예:_ LLaMA 및 BLOOM)에 널리 적용되었습니다. 이러한 연구 시도 중에서 LLaMA와 그 변형은 파라미터 효율적 튜닝에 많은 관심을 받았습니다. 예를 들어, 알파카-로라[144]는 알파카[142]의 경량 튜닝 버전으로 로라를 사용하여 훈련되었습니다(명령어 수행에 대한 52,000개의 인간 데모가 있는 7B LLaMA 모델을 미세 조정한 모델). 다양한 언어 또는 모델 크기에서 알파카-로라에 대한 광범위한 탐색이 이루어졌으며, 이는 컬렉션 페이지33에서 확인할 수 있습니다. 최근 연구인 LLaMA-Adapter [409]는 학습 가능한 프롬프트 벡터를 각 트랜스포머 레이어에 삽입하는데, 여기서 제로 초기화된 주의도는 적합하지 않은 프롬프트 벡터의 영향을 완화하여 훈련을 개선하기 위해 제안되었습니다. 또한 이 접근 방식을 멀티모달 설정, _예를 들어 시각적 질문 답변에 확장했습니다.