To showcase the versatility of chat vectors, diverse experiments were conducted using various chat vectors, base models, and target languages. Notably, we utilized open source LLaMA2 chat model as \(\theta_{chat}\), like llama2-chat, xwin-13b (Team, 2023) and tulu2-dpo-13b (Ivison et al., 2023) with Equation 2 to obtain chat vectors \(\tau\). For a distinct base model, the CP model, Breeze 9, which is Mistral-7B (Jiang et al., 2023) CP with Tranditional Chinese corpus (mistral\(\rightarrow\) CP), was employed. Additionally, the official mistral-instruct model10 served as the \(\theta_{chat}\) to extract the chat vector \(\tau\). For different target languages, the Korean LLaMA2 model, llama-2-ko-7b (L. Junbum, 2023), is used as the llama2 \(\rightarrow\) CP model.
챗 벡터의 다양성을 보여주기 위해 다양한 챗 벡터, 기본 모델 및 대상 언어를 사용하여 다양한 실험을 수행했습니다. 특히, 방정식 2를 사용하여 llama2-chat, xwin-13b(Team, 2023) 및 tulu2-dpo-13b(Ivison et al., 2023)와 같은 오픈 소스 LLaMA2 chat 모델을 \(\theta_{chat}\)로 사용하여 챗 벡터 \(\tau\)를 얻었습니다. 다른 기본 모델의 경우, 트랜디셔널 중국어 코퍼스(mistral\(\rightarrow\) CP)가 있는 Mistral-7B(Jiang et al., 2023) CP인 Breeze 9가 사용되었습니다. 또한 공식 mistral-instruct 모델10이 \(\theta_{chat}\)로 사용되어 chat 벡터 \(\tau\)를 추출했습니다. 다른 대상 언어의 경우, 한국어 LLaMA2 모델인 llama-2-ko-7b(L. Junbum, 2023)가 llama2 \(\rightarrow\) CP 모델로 사용되었습니다.
챗 벡터의 다양성을 보여주기 위해 다양한 챗 벡터, 기본 모델 및 대상 언어를 사용하여 다양한 실험을 수행했습니다. 특히, 방정식 2를 사용하여 llama2-chat, xwin-13b(Team, 2023) 및 tulu2-dpo-13b(Ivison et al., 2023)와 같은 오픈 소스 LLaMA2 챗 모델을 \(\theta_{chat}\)로 사용하여 챗 벡터 \(\tau\)를 얻었습니다. 다른 기본 모델의 경우, 트랜디셔널 중국어 코퍼스(mistral\(\rightarrow\) CP)가 있는 Mistral-7B(Jiang et al., 2023) CP인 Breeze 9가 사용되었습니다. 또한 공식 미스트랄 인스트럭트 모델10이 \(\theta_{chat}\)로 사용되어 채팅 벡터 \(\tau\)를 추출했습니다. 다른 대상 언어의 경우, 한국어 LLaMA2 모델인 llama-2-ko-7b(L. Junbum, 2023)가 llama2 \(\rightarrow\) CP 모델로 사용되었습니다.