We unify the structure of all the SFT data in a conversational format. We first add a "System" role at the beginning to setup a general instruction guiding LLM to provide polite and helpful answers. We also add "User" and "Assistant" roles to incorporate instruction and response pairs from the instruction tuning datasets. We apply fine-tuning using this unified format on an LLM foundation model.
모든 SFT 데이터의 구조를 대화 형식으로 통일합니다. 먼저 "System" 역할을 처음에 추가하여 LLM이 예의 바르고 유용한 답변을 제공하도록 안내하는 일반적인 instruction을 설정합니다. 또한 "User" 및 "Assistant" 역할을 추가하여 instruction tuning 데이터 세트의 instruction 및 응답 쌍을 통합합니다. 이 통합된 형식을 사용하여 LLM foundation 모델에 Fine-tuning을 적용합니다.
모든 SFT 데이터의 구조를 대화 형식으로 통일합니다. 먼저 "시스템" 역할을 처음에 추가하여 LLM이 예의 바르고 유용한 답변을 제공하도록 안내하는 일반적인 지침을 설정합니다. 또한 "사용자" 및 "어시스턴트" 역할을 추가하여 지침 튜닝 데이터 세트의 지침 및 응답 쌍을 통합합니다. 이 통합된 형식을 사용하여 LLM 기반 모델에 미세 조정을 적용합니다.