* LlaMA2-7B-chat model with 0-shot prompting: this is the commonly used instruction-finetuned model for QA tasks, where we provide clearly written instructions, but no reference documentation. * LlaMA2-7B-chat model with RAG (Llama2 + RAG): similar to the previous setting, except here we include reference documents. This is a popular technique when dealing with domain specific QA tasks. * domain specific Finetuning with 0-shot prompting (DSF): Performing standard supervised finetuning, without documents in context. We find that it mostly useful to align the answering style of the model as well as get familiar with the domain context. * domain specific Finetuning with RAG (DSF + RAG): Equip a domain specific finetuned model with external knowledge using RAG. So, for the "knowledge" the model does not know, it can still refer to the context.
* 0-shot prompting이 있는 LlaMA2-7B-chat 모델: 일반적으로 QA 작업에 사용되는 Instruction-finetuned 모델로, 명확하게 작성된 Instructions는 제공하지만 참조 문서는 제공하지 않습니다. * 참조 문서가 포함된 LlaMA2-7B-chat 모델(Llama2 + RAG): 이전 설정과 유사하지만 여기에는 참조 문서가 포함됩니다. 이는 도메인별 QA 작업을 처리할 때 널리 사용되는 기법입니다. * 0-shot prompting을 사용한 도메인별 Fine-tuning (DSF): 문맥에 맞는 문서 없이 표준 Supervised Fine-tuning (SFT)을 수행합니다. 이 방법은 모델의 답변 스타일을 조정하고 도메인 컨텍스트에 익숙해지는 데 가장 유용합니다. * 도메인별 Fine-tuning + RAG (DSF + RAG): 도메인별 Fine-tuned 모델에 RAG를 사용하여 외부 지식을 갖추도록 합니다. 따라서 모델이 알지 못하는 '지식'에 대해서도 문맥을 참조할 수 있습니다.
* 0샷 프롬프트가 있는 LlaMA2-7B-chat 모델: 일반적으로 QA 작업에 사용되는 명령어 미세 조정 모델로, 명확하게 작성된 지침은 제공하지만 참조 문서는 제공하지 않습니다. * 참조 문서가 포함된 라마2-7B-chat 모델(Llama2 + RAG): 이전 설정과 유사하지만 여기에는 참조 문서가 포함됩니다. 이는 도메인별 QA 작업을 처리할 때 널리 사용되는 기법입니다. * 0샷 프롬프트를 사용한 도메인별 미세 조정(DSF): 문맥에 맞는 문서 없이 표준 지도 학습 미세 조정을 수행합니다. 이 방법은 모델의 답변 스타일을 조정하고 도메인 컨텍스트에 익숙해지는 데 가장 유용합니다. * 도메인별 미세 조정 + RAG(DSF + RAG): 도메인별 미세 조정된 모델에 RAG를 사용하여 외부 지식을 갖추도록 합니다. 따라서 모델이 알지 못하는 '지식'에 대해서도 문맥을 참조할 수 있습니다.