In this experiment, we merge a Japanese LLM and the LLM component in a VLM in the parameter space. We select shisa-gamma-7b-v1[3] as the Japanese LLM and LLaVA-1.6-Mistral-7B[31] as the VLM. Both models are fine-tunes of the Mistral-7B-v0.1[22] base model.
이 실험에서는 파라미터 공간에서 일본어 LLM과 VLM의 LLM 구성 요소를 병합합니다. 일본어 LLM으로는 shisa-gamma-7b-v1[3]을, VLM으로는 LLaVA-1.6-Mistral-7B[31]을 선택합니다. 두 모델 모두 Mistral-7B-v0.1[22] 기본 모델을 Fine-tuning한 것입니다.
이 실험에서는 파라미터 공간에서 일본어 LLM과 VLM의 LLM 구성 요소를 병합합니다. 일본어 LLM으로는 shisa-gamma-7b-v1[3]을, VLM으로는 LLaVA-1.6-Mistral-7B[31]을 선택합니다. 두 모델 모두 Mistral-7B-v0.1[22] 기본 모델을 미세 조정한 것입니다.