Simple weight interpolation works well for merging image generation models that operate in a real valued latent and output space, but to our surprise, they also still work for merging language models under the right conditions, but have performance issues [49]. Recently, new methods have been proposed to address merging language models specifically. One method, Task Arithmetic [21], involves building _task vectors_ by subtracting pre-trained from fine-tuned model weights, enabling manipulation through arithmetic operations to steer the merged model's behavior.
간단한 가중치 보간은 실수 값 잠재 및 출력 공간에서 작동하는 이미지 생성 모델을 병합하는 데 잘 작동하지만, 놀랍게도 올바른 조건에서 언어 모델을 병합하는 데에도 여전히 작동하지만 성능 문제가 있습니다[49]. 최근에는 언어 모델을 특별히 병합하기 위한 새로운 방법이 제안되었습니다. 한 가지 방법인 Task Arithmetic[21]은 미리 학습된 모델 가중치에서 Fine-tuned 모델 가중치를 빼서 _task vectors_를 구축하여 산술 연산을 통해 조작하여 병합된 모델의 동작을 유도하는 방식입니다.
간단한 가중치 보간은 실수 값 잠재 및 출력 공간에서 작동하는 이미지 생성 모델을 병합하는 데 잘 작동하지만, 놀랍게도 올바른 조건에서 언어 모델을 병합하는 데에도 여전히 작동하지만 성능 문제가 있습니다[49]. 최근에는 언어 모델을 특별히 병합하기 위한 새로운 방법이 제안되었습니다. 한 가지 방법인 작업 산술[21]은 미리 학습된 모델 가중치에서 미세 조정된 모델 가중치를 빼서 _작업 벡터_를 구축하여 산술 연산을 통해 조작하여 병합된 모델의 동작을 유도하는 방식입니다.