However, building a conversational QA model, that can match the accuracy of the state-of-the-art black-box model, i.e., GPT-4 (OpenAI, 2023), is still a grand challenge for the research community. In this work, we introduce ChatQA-70B, a white-box conversational QA model with GPT-4 level accuracy, through a proposed two-stage instruction tuning recipe, an enhanced retriever for retrieval-augmented generation (RAG) in conversational QA, and careful data curation process.
그러나 최첨단 블랙박스 모델인 GPT-4(OpenAI, 2023)의 정확도에 필적할 수 있는 대화형 QA 모델을 구축하는 것은 여전히 연구 커뮤니티의 큰 과제입니다. 이 연구에서는 제안된 2단계 Instruction Tuning 레시피, 대화형 QA에서 Retrieval-augmented generation (RAG)을 위한 향상된 검색기, 신중한 데이터 큐레이션 프로세스를 통해 GPT-4 수준의 정확도를 갖춘 화이트박스 대화형 QA 모델인 ChatQA-70B를 소개합니다.
그러나 최첨단 블랙박스 모델인 GPT-4(OpenAI, 2023)의 정확도에 필적할 수 있는 대화형 QA 모델을 구축하는 것은 여전히 연구 커뮤니티의 큰 과제입니다. 이 연구에서는 제안된 2단계 명령어 튜닝 레시피, 대화형 QA에서 검색 증강 생성(RAG)을 위한 향상된 검색기, 신중한 데이터 큐레이션 프로세스를 통해 GPT-4 수준의 정확도를 갖춘 화이트박스 대화형 QA 모델인 ChatQA-70B를 소개합니다.