Figure 1: An illustration to demonstrate the difference between the traditional approach and our method. The blue arrows on the top right side depict the conventional method of constructing a non-English LM. First, an open-source PLM (e.g. LLaMA2) undergoes continual pre-training (CP) on the target language, followed by SFT and RLHF alignment procedures. In contrast, the gray arrow on the left illustrates how we obtain the chat vector through simple parameter subtraction. This chat vector can be added to the CP model to produce the chat model in the target language, as depicted by the dual-color arrow.
그림 1: 기존 접근 방식과 우리 방법의 차이점을 보여주는 그림입니다. 오른쪽 상단의 파란색 화살표는 비영어 LM을 구축하는 기존 방법을 나타냅니다. 먼저 오픈 소스 PLM(예: LLaMA2)은 대상 언어에 대한 지속적 사전 학습(Continual Pre-training, CP)을 거친 후 Supervised Fine-tuning (SFT) 및 Reinforcement Learning from Human Feedback (RLHF) 정렬 절차를 거칩니다. 반면 왼쪽의 회색 화살표는 간단한 파라미터 빼기로 채팅 벡터를 얻는 방법을 보여줍니다. 이 채팅 벡터를 CP 모델에 추가하면 그림과 같이 대상 언어의 채팅 모델을 생성할 수 있습니다.
그림 1: 기존 접근 방식과 우리 방법의 차이점을 보여주는 그림입니다. 오른쪽 상단의 파란색 화살표는 비영어 LM을 구축하는 기존 방법을 나타냅니다. 먼저 오픈 소스 PLM(예: LLaMA2)은 대상 언어에 대한 지속적 사전 학습(CP)을 거친 후 SFT 및 RLHF 정렬 절차를 거칩니다. 반면 왼쪽의 회색 화살표는 간단한 파라미터 빼기로 채팅 벡터를 얻는 방법을 보여줍니다. 이 채팅 벡터를 CP 모델에 추가하면 그림과 같이 대상 언어의 채팅 모델을 생성할 수 있습니다.