Given that our model operates in a many-to-many translation format and the additional data is specific to only de and zh directions, we anticipate changes in performance when translating into these languages, but not in others. To assess the impact of the human-labeled data, we conducted a comparison between models exclusively fine-tuned on triplet data and those fine-tuned on both triplet and human-labeled data. The training approach remained consistent, utilizing the ALMA-13B-LoRA model fine-tuned via CPO. It's important to note that tied data were excluded from this analysis due to their lack of clear preference.
우리 모델이 다대다 번역 형식으로 작동하고 추가 데이터가 de 및 zh 방향에만 국한되어 있다는 점을 감안할 때, 이러한 언어로 번역할 때 성능에 변화가 있을 것으로 예상하지만 다른 언어에서는 그렇지 않을 것으로 예상합니다. 인간이 레이블을 붙인 데이터의 영향을 평가하기 위해 트리플렛 데이터만 Fine-tuning한 모델과 트리플렛과 인간이 레이블을 붙인 데이터 모두에 Fine-tuning한 모델 간의 비교를 수행했습니다. Training 방식은 일관되게 유지되었으며, ALMA-13B-LoRA 모델을 CPO를 통해 Fine-tuning했습니다. 선호도가 명확하지 않아서 결정된 데이터는 이 분석에서 제외되었다는 점에 유의해야 합니다.
우리 모델이 다대다 번역 형식으로 작동하고 추가 데이터가 de 및 zh 방향에만 국한되어 있다는 점을 감안할 때, 이러한 언어로 번역할 때 성능에 변화가 있을 것으로 예상하지만 다른 언어에서는 그렇지 않을 것으로 예상합니다. 인간이 레이블을 붙인 데이터의 영향을 평가하기 위해 트리플렛 데이터만 미세 조정한 모델과 트리플렛과 인간이 레이블을 붙인 데이터 모두에 미세 조정한 모델 간의 비교를 수행했습니다. 트레이닝 방식은 일관되게 유지되었으며, ALMA-13B-LoRA 모델을 CPO를 통해 미세 조정했습니다. 선호도가 명확하지 않아서 결정된 데이터는 이 분석에서 제외되었다는 점에 유의해야 합니다.