The instruction for GPT-3.5-turbo comprises three parts: 1) system role guiding the model to provide helpful answer, 2) examples of conversational QA indicating the required data types, and 3) a document that directs the model to generate conversational QA based on its content. We collect 7k documents (average \(\sim\)1k words per document) from common crawl, which cover a wide range of domains. Each document is used for generation of a single conversational QA sample, which leads to a total of 7k multi-turn QA dialogues with an average of 4.4 user-agent turns per dialogue (called SyntheticConvQA).
GPT-3.5-turbo의 instruction은 세 부분으로 구성됩니다: 1) 모델이 유용한 답변을 제공하도록 안내하는 시스템 역할, 2) 필요한 데이터 유형을 나타내는 대화형 QA의 예, 3) 모델이 해당 콘텐츠를 기반으로 대화형 QA를 생성하도록 지시하는 문서입니다. 우리는 다양한 도메인을 포괄하는 7,000개의 문서(문서당 평균 \(\sim\)1,000단어)를 common crawl에서 수집합니다. 각 문서는 단일 대화형 QA 샘플 생성에 사용되며, 이는 대화당 평균 4.4개의 사용자 에이전트 턴(SyntheticConvQA라고 함)으로 총 7,000개의 multi-turn QA 대화로 이어집니다.
GPT-3.5-turbo의 지침은 세 부분으로 구성됩니다: 1) 모델이 유용한 답변을 제공하도록 안내하는 시스템 역할, 2) 필요한 데이터 유형을 나타내는 대화형 QA의 예, 3) 모델이 해당 콘텐츠를 기반으로 대화형 QA를 생성하도록 지시하는 문서입니다. 우리는 다양한 도메인을 포괄하는 7,000개의 문서(문서당 평균 \(\sim\)1,000단어)를 일반 크롤링에서 수집합니다. 각 문서는 단일 대화형 QA 샘플 생성에 사용되며, 이는 대화당 평균 4.4개의 사용자 에이전트 턴(SyntheticConvQA라고 함)으로 총 7,000개의 다중 턴 QA 대화로 이어집니다.