FLAN(Chung et al., 2022) is one of the most systematic and comprehensive approaches among the many studies on instruction tuning. This approach fine-tunes the language model on the instruction-optimised dataset, scales the number of tasks and model size, and incorporates chain-of-thought data in the fine-tuning. Although the authors did not consider a specific approach to tuning instructions in RALM architecture, their work provides a valuable reference for future research. In the instruction fine-tuning of RALM, Lin et al. (2023) integrated in-context retrieval augmentation. This greatly reduces the likelihood of the language model being misled by irrelevant retrieval content. SAIL(Luo et al., 2023) builds language generation and instruction tracking capabilities on complex search results generated by internal and external search engines. Using a corpus of instruction tuning, they collect search results for each training case from different search APIs and domains, and construct a search-based training set containing a triplet of (instruction, grounding information, response). In contrast to training on instruction-tuned datasets, Madaan et al. (2022) and Lazaridou et al. (2022) propose to prompt large models directly from retrieved knowledge. Madaan et al. (2022) used GPT-3 to clarify memory pairings of recorded cases where the model misinterpreted the user's intention, as well as user feedback. This ensures that their system can generate enhanced prompts for each new query based on user feedback. In contrast, Lazaridou et al. (2022) uses few-shot prompts and answer reordering to improve inference computation.
FLAN(Chung et al., 2022)은 Instruction Tuning에 대한 많은 연구 중 가장 체계적이고 포괄적인 접근 방식 중 하나입니다. 이 접근 방식은 Instruction-optimised dataset에서 언어 모델을 Fine-tuning하고, 작업 수와 모델 크기를 확장하며, Fine-tuning에 chain-of-thought 데이터를 통합합니다. 저자들은 RALM 아키텍처에서 Instruction을 조정하는 구체적인 접근 방식을 고려하지 않았지만, 이 작업은 향후 연구에 귀중한 참고 자료를 제공합니다. Lin et al. (2023)은 RALM의 Instruction Fine-tuning에서 In-Context Retrieval Augmentation을 통합했습니다. 이렇게 하면 언어 모델이 관련 없는 검색 결과에 의해 오도될 가능성을 크게 줄일 수 있습니다. SAIL(Luo et al., 2023)은 내부 및 외부 검색 엔진에서 생성된 복잡한 검색 결과에 언어 생성 및 Instruction 추적 기능을 구축합니다. Instruction Tuning 코퍼스를 사용하여 각 훈련 사례에 대한 검색 결과를 다양한 검색 API 및 도메인에서 수집하고, (Instruction, grounding information, response)의 트리플렛을 포함하는 검색 기반 훈련 세트를 구성합니다. Instruction-Tuned 데이터 세트에 대한 훈련과는 달리, Madaan et al. (2022)과 Lazaridou et al. (2022)은 검색된 지식에서 직접 대규모 모델을 프롬프트하도록 제안합니다. Madaan et al. (2022)은 GPT-3를 사용하여 모델이 사용자의 의도를 잘못 해석한 기록된 사례의 메모리 페어링과 사용자 피드백을 명확히 했습니다. 이를 통해 이 시스템은 사용자 피드백을 기반으로 각각의 새로운 쿼리에 대해 향상된 프롬프트를 생성할 수 있습니다. 반면에 Lazaridou et al. (2022)은 Few-shot 프롬프트와 답변 재정렬을 사용하여 추론 계산을 개선합니다.
FLAN(Chung et al., 2022)은 지시 튜닝에 대한 많은 연구 중 가장 체계적이고 포괄적인 접근 방식 중 하나입니다. 이 접근 방식은 지시 최적화 데이터 세트에서 언어 모델을 미세 조정하고, 작업 수와 모델 크기를 확장하며, 미세 조정에 생각의 사슬 데이터를 통합합니다. 저자들은 RALM 아키텍처에서 지침을 조정하는 구체적인 접근 방식을 고려하지 않았지만, 이 작업은 향후 연구에 귀중한 참고 자료를 제공합니다. Lin et al. (2023)은 RALM의 지침 미세 조정에서 컨텍스트 검색 증강을 통합했습니다. 이렇게 하면 언어 모델이 관련 없는 검색 결과에 의해 오도될 가능성을 크게 줄일 수 있습니다. SAIL(Luo et al., 2023)은 내부 및 외부 검색 엔진에서 생성된 복잡한 검색 결과에 언어 생성 및 지침 추적 기능을 구축합니다. 지침 튜닝 코퍼스를 사용하여 각 훈련 사례에 대한 검색 결과를 다양한 검색 API 및 도메인에서 수집하고, (지침, 그라운딩 정보, 응답)의 트리플렛을 포함하는 검색 기반 훈련 세트를 구성합니다. 지침 튜닝 데이터 세트에 대한 훈련과는 달리, Madaan et al. (2022)과 Lazaridou et al. (2022)은 검색된 지식에서 직접 대규모 모델을 프롬프트하도록 제안합니다. Madaan et al. (2022)은 GPT-3를 사용하여 모델이 사용자의 의도를 잘못 해석한 기록된 사례의 메모리 페어링과 사용자 피드백을 명확히 했습니다. 이를 통해 이 시스템은 사용자 피드백을 기반으로 각각의 새로운 쿼리에 대해 향상된 프롬프트를 생성할 수 있습니다. 반면에 Lazaridou et al. (2022)은 소량 프롬프트와 답변 재정렬을 사용하여 추론 계산을 개선합니다.