Chinese LLaMA improves original LLaMA.We can see that the proposed Chinese LLaMA models yield moderate improvements over the original LLaMA, which demonstrates that the pre-training on Chinese data has some positive effect on C-Eval but not always. When we compare Chinese LLaMA and LLaMA-Plus, the latter does not show significant improvements over the former one, even showing inferior results for 13B setting. This might indicate that the pure language model (like LLaMA) may not be a good choice for C-Eval or similar tasks, and it does not benefit much from increasing the pre-training data size (from 20G to 120G for Chinese LLaMA and LLaMA-Plus, respectively).
Chinese LLaMA는 원래 LLaMA를 개선합니다. 제안된 Chinese LLaMA 모델이 원래 LLaMA보다 적당한 개선 효과를 보이는 것을 볼 수 있으며, 이는 중국어 데이터에 대한 pre-training이 C-Eval에 어느 정도 긍정적인 영향을 미치지만 항상 그렇지는 않다는 것을 보여줍니다. Chinese LLaMA와 LLaMA-Plus를 비교하면 후자가 전자에 비해 큰 개선 효과를 보이지 않으며, 13B 설정의 경우 열등한 결과를 보이기도 합니다. 이는 순수 language model(예: LLaMA)이 C-Eval 또는 유사한 작업에 적합하지 않을 수 있으며, pre-training 데이터 크기(Chinese LLaMA와 LLaMA-Plus의 경우 각각 20G에서 120G로 증가)를 늘리는 것이 큰 도움이 되지 않을 수 있음을 나타낼 수 있습니다.
Chinese LLaMA는 원래 LLaMA를 개선합니다.제안된 Chinese LLaMA 모델이 원래 LLaMA보다 적당한 개선 효과를 보이는 것을 볼 수 있으며, 이는 중국어 데이터에 대한 사전 학습이 C-Eval에 어느 정도 긍정적인 영향을 미치지만 항상 그렇지는 않다는 것을 보여줍니다. 중국어 LLaMA와 LLaMA-Plus를 비교하면 후자가 전자에 비해 큰 개선 효과를 보이지 않으며, 13B 설정의 경우 열등한 결과를 보이기도 합니다. 이는 순수 언어 모델(예: LLaMA)이 C-Eval 또는 유사한 작업에 적합하지 않을 수 있으며, 사전 학습 데이터 크기(중국어 LLaMA와 LLaMA-Plus의 경우 각각 20G에서 120G로 증가)를 늘리는 것이 큰 도움이 되지 않을 수 있음을 나타낼 수 있습니다.