To evaluate our models effectively, we annotated 200 samples across ten distinct task types and utilized GPT-4 for evaluation. Our experiments demonstrated that the proposed models significantly outperformed the original LLaMA in Chinese understanding and generation tasks. We also tested our models on C-Eval datasets. The results show that the proposed model could achieve significant improvements and show competitive performance to the models with several times bigger sizes.
우리 모델을 효과적으로 평가하기 위해, 우리는 열 가지 다른 작업 유형에 걸쳐 200개의 샘플에 주석을 달고 평가를 위해 GPT-4를 활용했습니다. 실험 결과, 제안된 모델이 중국어 이해 및 생성 작업에서 원래의 LLaMA를 크게 능가하는 성능을 보였습니다. 또한, 우리는 C-Eval 데이터셋에서 모델을 테스트했습니다. 결과는 제안된 모델이 상당한 개선을 이루었으며, 몇 배 더 큰 크기의 모델들과 경쟁력 있는 성능을 보일 수 있음을 보여줍니다.
모델을 효과적으로 평가하기 위해 10가지 작업 유형에 걸쳐 200개의 샘플을 주석 처리하고 평가를 위해 GPT-4를 활용했습니다. 실험 결과, 제안된 모델이 중국어 이해 및 생성 작업에서 기존 LLaMA보다 훨씬 뛰어난 성능을 보여주었습니다. 또한 C-Eval 데이터 세트에서 모델을 테스트했습니다. 그 결과, 제안된 모델이 상당한 개선을 달성하고 몇 배 더 큰 크기의 모델과 경쟁력 있는 성능을 보여줄 수 있음을 보여주었습니다.