ChatML FormatBeyond the focus on data quality and diversity, our observations revealed that the format of the data substantially influences the model's ultimate performance. To this end, we implemented the ChatML-style format [53]. This structured approach empowers the model to differentiate among various information types, such as system configurations, user inputs, and assistant responses.
데이터의 품질과 다양성에 중점을 두는 것 외에도, 우리의 관찰 결과 데이터의 형식이 모델의 최종 성능에 상당한 영향을 미친다는 것을 알게 되었습니다. 이를 위해 우리는 ChatML 스타일 형식 [53]을 구현했습니다. 이 구조화된 접근 방식은 모델이 시스템 구성, 사용자 입력, 어시스턴트 응답 등 다양한 정보 유형을 구별할 수 있도록 합니다.
ChatML 형식데이터의 품질과 다양성에 대한 초점을 넘어 데이터의 형식이 모델의 궁극적인 성능에 상당한 영향을 미친다는 사실을 발견했습니다. 이를 위해 ChatML 스타일 형식[53]을 구현했습니다. 이러한 구조화된 접근 방식을 통해 모델은 시스템 구성, 사용자 입력, 어시스턴트 응답 등 다양한 정보 유형을 구분할 수 있습니다.