Our study primarily addressed a template-based QA task, suggesting future research could tackle more complex QA challenges, such as multi-hop QA Ho et al. (2020) or Conversational QA Christmann et al. (2022). Furthermore, we noted that our use of Zephyr for synthetic data generation has limitations in following Chain of Thought (CoT), highlighting the potential benefits of advanced data generation techniques to enhance data quality and reduce fine-tuning cost.
우리의 연구는 주로 템플릿 기반 QA 작업을 다루었기 때문에 향후 연구에서는 멀티 홉 QA Ho et al. (2020) 또는 대화형 QA Christmann et al. (2022)과 같은 더 복잡한 QA 문제를 해결할 수 있을 것으로 보입니다. 또한 합성 데이터 생성에 Zephyr를 사용하면 Chain of Thought (CoT)을 따르는 데 한계가 있다는 점에 주목하여 데이터 품질을 향상하고 Fine-tuning 비용을 줄이기 위한 고급 데이터 생성 기술의 잠재적 이점을 강조했습니다.
우리의 연구는 주로 템플릿 기반 QA 작업을 다루었기 때문에 향후 연구에서는 멀티 홉 QA Ho et al. (2020) 또는 대화형 QA Christmann et al. (2022)과 같은 더 복잡한 QA 문제를 해결할 수 있을 것으로 보입니다. 또한 합성 데이터 생성에 제프리를 사용하면 생각의 사슬(CoT)을 따르는 데 한계가 있다는 점에 주목하여 데이터 품질을 향상하고 미세 조정 비용을 줄이기 위한 고급 데이터 생성 기술의 잠재적 이점을 강조했습니다.