Linear weight averaging not only works well for image processing and classification models, but is also effective for image generation models such as latent diffusion models. The release of Stable Diffusion [39] led to a variety of specialist fine-tunes of the model for a variety of different styles, from photorealism, to anime, to realistic painting styles. Popular open-source WebUIs [4] enabled hobbyists to experiment with merging different models using linear or spherical linear interpolation (SLERP) [47] of weight parameters of distinct fine-tuned Stable Diffusion models. This has led to the discovery of merged models that combine strengths of specialized models into a single model. For some time, the most popular Stable Diffusion models were neither the original base models nor the fine-tuned versions, but rather the merged models created by enthusiasts. This trend persists until the release of a more advanced base model, at which point the community's cycle of fine-tuning and merging is renewed.
선형 가중치 평균은 이미지 처리 및 분류 모델뿐만 아니라 잠재 확산 모델과 같은 이미지 생성 모델에도 효과적입니다. Stable Diffusion [39]의 출시로 사실주의부터 애니메이션, 사실적인 그림 스타일 등 다양한 스타일을 위한 다양한 전문 Fine-tunes 모델이 개발되었습니다. 대중적인 오픈 소스 WebUIs [4]를 통해 애호가들은 서로 다른 Fine-tuned Stable Diffusion 모델의 가중치 매개변수를 선형 또는 구형 선형 보간(SLERP) [47]하여 서로 다른 모델을 병합하는 실험을 할 수 있게 되었습니다. 이를 통해 전문 모델의 강점을 하나의 모델로 결합한 병합 모델을 발견하게 되었습니다. 한동안 가장 인기 있는 Stable Diffusion 모델은 원래의 기본 모델이나 Fine-tuned 버전이 아니라 애호가들이 만든 병합 모델이었습니다. 이러한 추세는 더 발전된 기본 모델이 출시될 때까지 지속되며, 커뮤니티에서는 Fine-tuning 및 병합 주기가 새롭게 시작됩니다.
선형 가중치 평균은 이미지 처리 및 분류 모델뿐만 아니라 잠재 확산 모델과 같은 이미지 생성 모델에도 효과적입니다. Stable Diffusion [39]의 출시로 사실주의부터 애니메이션, 사실적인 그림 스타일 등 다양한 스타일을 위한 다양한 전문 미세 조정 모델이 개발되었습니다. 대중적인 오픈 소스 WebUI [4]를 통해 애호가들은 서로 다른 미세 조정된 Stable Diffusion 모델의 가중치 매개변수를 선형 또는 구형 선형 보간(SLERP) [47]하여 서로 다른 모델을 병합하는 실험을 할 수 있게 되었습니다. 이를 통해 전문 모델의 강점을 하나의 모델로 결합한 병합 모델을 발견하게 되었습니다. 한동안 가장 인기 있는 Stable Diffusion 모델은 원래의 기본 모델이나 미세 조정된 버전이 아니라 애호가들이 만든 병합 모델이었습니다. 이러한 추세는 더 발전된 기본 모델이 출시될 때까지 지속되며, 커뮤니티에서는 미세 조정 및 병합 주기가 새롭게 시작됩니다.