In this work, we present a novel approach to imbue LLMs with chat capabilities in a new language. Through continual pre-training and the integration of the chat vector into an English-based PLM, the model acquires the ability of instruction following and aligning with human skills, including generating safe responses and multi-turn dialogue. In contrast to the current approach involving CP, SFT, and Human Preference Training, our method entails solely CP and straightforward arithmetic operations, significantly reducing the cost of aligning models with human preferences.
이 연구에서는 새로운 언어로 LLM에 채팅 기능을 부여하는 새로운 접근 방식을 소개합니다. 지속적인 사전 학습과 채팅 벡터를 영어 기반 PLM에 통합함으로써 모델은 안전한 응답 생성 및 다중 턴 대화를 포함한 인간 기술과 일치하는 Instruction을 따르는 능력을 습득합니다. 현재 CP, Supervised Fine-tuning (SFT) 및 Human Preference Training을 포함하는 접근 방식과 달리, 우리의 방법은 CP와 간단한 산술 연산만 수반하므로 모델을 인간의 선호도에 맞추는 데 드는 비용을 크게 줄일 수 있습니다.
이 연구에서는 새로운 언어로 LLM에 채팅 기능을 부여하는 새로운 접근 방식을 소개합니다. 지속적인 사전 학습과 채팅 벡터를 영어 기반 PLM에 통합함으로써 모델은 안전한 응답 생성 및 다중 턴 대화를 포함한 인간 기술과 일치하는 지시어를 따르는 능력을 습득합니다. 현재 CP, SFT 및 인간 선호도 학습을 포함하는 접근 방식과 달리, 우리의 방법은 CP와 간단한 산술 연산만 수반하므로 모델을 인간의 선호도에 맞추는 데 드는 비용을 크게 줄일 수 있습니다.