Although numerous research about instruction tuning has been conducted, a few work focused on improving RAG or context awareness generation for QA. Lin et al. (2023) introduced a retrieval-augmented instruction tuning method, which appends top-\(k\) retrieved chunks for LLM fine-tuning. Wang et al. (2023) applied instruction tuning after retrieval-augmented pretraining. In contrast, we propose a two-stage instruction tuning method to improve generation with retrival or provided context. We find that appending top-\(k\) retrieved chunks for LLM fine-tuning does not help for a wide range of conversation QA tasks (see SS6.3 for details).
수많은 Instruction Tuning에 대한 연구가 진행되었지만, 질문에 대한 답변 또는 context awareness 생성을 개선하는 데 초점을 맞춘 연구는 거의 없습니다. Lin 등(2023)은 LLM Fine-tuning을 위해 상위 \(k\)개의 검색된 청크를 추가하는 Retrieval-augmented Instruction Tuning 방법을 소개했습니다. Wang 등(2023)은 Retrieval-augmented pretraining 후 Instruction Tuning을 적용했습니다. 반면에 우리는 검색 또는 제공된 컨텍스트로 생성을 개선하기 위해 2단계 Instruction Tuning 방법을 제안합니다. LLM Fine-tuning을 위해 상위 \(k\)개의 검색된 청크를 추가하는 것은 광범위한 대화 QA 작업에 도움이 되지 않는다는 것을 발견했습니다(자세한 내용은 SS6.3 참조).
수많은 교육 튜닝에 대한 연구가 진행되었지만, 질문에 대한 답변 또는 컨텍스트 인식 생성을 개선하는 데 초점을 맞춘 연구는 거의 없습니다. Lin 등(2023)은 LLM 미세 조정을 위해 상위 \(k\)개의 검색된 청크를 추가하는 검색 증강 명령어 튜닝 방법을 소개했습니다. Wang 등(2023)은 검색 증강 전처리 후 명령어 튜닝을 적용했습니다. 반면에 우리는 검색 또는 제공된 컨텍스트로 생성을 개선하기 위해 2단계 명령어 튜닝 방법을 제안합니다. LLM 미세 조정을 위해 상위 \(k\)개의 검색된 청크를 추가하는 것은 광범위한 대화 QA 작업에 도움이 되지 않는다는 것을 발견했습니다(자세한 내용은 SS6.3 참조).