We spend extra efforts on reducing hallucination and repetition: (1). to reduce hallucinations, we examine and ensure that the knowledge in the responses is not contained within the model, and eliminate responses that might lead to memorization; (2). to reduce repetition, we rewrite the repetitive turns of the responses that usually exist but may be overlooked in the finetuning data.
환각과 반복을 줄이기 위해 추가적인 노력을 기울입니다: (1). Hallucination을 줄이기 위해 응답의 지식이 모델에 포함되어 있지 않은지 검토하고, 암기로 이어질 수 있는 응답을 제거합니다; (2). 반복을 줄이기 위해 Fine-tuning 데이터에서 간과될 수 있지만 일반적으로 존재하는 응답의 반복되는 턴을 다시 작성합니다.
환각과 반복을 줄이기 위해 추가적인 노력을 기울입니다: (1). 환각을 줄이기 위해 응답의 지식이 모델에 포함되어 있지 않은지 검토하고, 암기로 이어질 수 있는 응답을 제거합니다; (2). 반복을 줄이기 위해 파인튜닝 데이터에서 간과될 수 있지만 일반적으로 존재하는 응답의 반복되는 턴을 다시 작성합니다.