Pre-instruction-tuning on QA and documents sequentiallyOur second implementation trains on QA and associated documents sequentially (Fig. 4 5), with the intuition that the ability to absorb knowledge from documents can be strengthened if an LLM is trained on the complex documents after it has grasped the associated simpler QA pairs.
QA 및 문서에 대한 Pre-instruction-tuning 순차적으로 두 번째 구현은 복잡한 문서를 이해한 후 관련된 더 단순한 QA 쌍을 학습하는 경우 문서에서 지식을 흡수하는 능력이 강화될 수 있다는 직관을 바탕으로 QA 및 관련 문서를 순차적으로 학습합니다(그림 4 5).
QA 및 문서에 대한 사전 지침 조정 순차적으로 두 번째 구현은 복잡한 문서를 이해한 후 관련된 더 단순한 QA 쌍을 학습하는 경우 문서에서 지식을 흡수하는 능력이 강화될 수 있다는 직관을 바탕으로 QA 및 관련 문서를 순차적으로 학습합니다(그림 4 5).