We pre-train the Chinese LLaMA model with the standard Causal Language Modeling (CLM) task. Given an input token sequence \(\mathbf{x}=(x_{0},x_{1},x_{2},\ldots)\), the model is trained to predict the next token \(x_{i}\) in an autoregressive manner.
표준 Causal Language Modeling (CLM) 작업을 통해 중국어 LLaMA 모델을 사전 학습합니다. 입력 토큰 시퀀스 \(\mathbf{x}=(x_{0},x_{1},x_{2},\ldots)\)가 주어지면, 모델은 autoregressive 방식으로 다음 토큰 \(x_{i}\)를 예측하도록 학습됩니다.
표준 인과 언어 모델링(CLM) 작업을 통해 중국어 LLaMA 모델을 사전 학습합니다. 입력 토큰 시퀀스 \(mathbf{x}=(x_{0},x_{1},x_{2},\ldots)\)가 주어지면, 모델은 자동 회귀 방식으로 다음 토큰 \(x_{i}\)를 예측하도록 학습됩니다.