To further enhance the capabilities of pre-trained Large Language Models(Touvron et al., 2023; Jiang et al., 2023; Achiam et al., 2023; Azerbaijan et al., 2023) on reasoning tasks, the primary strategies involve fine-tuning and various training-free post-processing techniques. The post-processing techniques include approaches like prompting(Wei et al., 2022; Fu et al., 2022; Kojima et al., 2022; Wang et al., 2023a), ensembling(Wang et al., 2022; Li et al., 2022), and reranking(Uesato et al., 2022; Cobbe et al., 2021). A unique technique specific to LLMs is to leverage the model's reasoning capabilities through prompting. This entails crafting zero-shot prompts(Kojima et al., 2022; Wang et al., 2023a) or designing a small set of demonstrations to facilitate in-context learning(Wei et al., 2022; Fu et al., 2022). Additionally, there are methods focused on designing intricate pipelines utilizing various rules or algorithms for enhanced reasoning. These methods include search(Yao et al., 2023; Besta et al., 2023), iterative feedback collection(Yao et al., 2022), and employing the Program-of-Thought approach for generating code solutions(Chen et al., 2022).
추론 작업에서 사전 학습된 Large Language Models (Touvron et al., 2023; Jiang et al., 2023; Achiam et al., 2023; Azerbaijan et al., 2023)의 기능을 향상시키기 위한 주요 전략은 Fine-tuning과 다양한 무료 훈련 후처리 기법을 포함합니다. 후처리 기법에는 prompting (Wei et al., 2022; Fu et al., 2022; Kojima et al., 2022; Wang et al., 2023a), ensembling (Wang et al., 2022; Li et al., 2022), 재순위화 (Uesato et al., 2022; Cobbe et al., 2021)와 같은 접근 방식이 포함됩니다. LLM에 특화된 고유한 기법은 prompting을 통해 모델의 추론 기능을 활용하는 것입니다. 여기에는 zero-shot prompts (Kojima et al., 2022; Wang et al., 2023a)를 작성하거나 소규모 데모를 설계하여 In-Context Learning (Wei et al., 2022; Fu et al., 2022)을 촉진하는 것이 포함됩니다. 또한, 향상된 추론을 위해 다양한 규칙이나 알고리즘을 활용하는 복잡한 파이프라인을 설계하는 데 중점을 둔 방법도 있습니다. 이러한 방법에는 검색 (Yao et al., 2023; Besta et al., 2023), 반복적 피드백 수집 (Yao et al., 2022), 코드 솔루션 생성을 위한 Program-of-Thought 접근 방식 (Chen et al., 2022) 등이 있습니다.
추론 작업에서 사전 학습된 대규모 언어 모델(Touvron et al., 2023; Jiang et al., 2023; Achiam et al., 2023; Azerbaijan et al., 2023)의 기능을 향상시키기 위한 주요 전략은 미세 조정과 다양한 무료 훈련 후처리 기법을 포함합니다. 후처리 기법에는 프롬프트(Wei et al., 2022; Fu et al., 2022; Kojima et al., 2022; Wang et al., 2023a), 앙상블링(Wang et al., 2022; Li et al., 2022), 재순위화(Uesato et al., 2022; Cobbe et al., 2021)와 같은 접근 방식이 포함됩니다. LLM에 특화된 고유한 기법은 프롬프트를 통해 모델의 추론 기능을 활용하는 것입니다. 여기에는 제로샷 프롬프트(Kojima et al., 2022; Wang et al., 2023a)를 작성하거나 소규모 데모를 설계하여 컨텍스트 내 학습(Wei et al., 2022; Fu et al., 2022)을 촉진하는 것이 포함됩니다. 또한, 향상된 추론을 위해 다양한 규칙이나 알고리즘을 활용하는 복잡한 파이프라인을 설계하는 데 중점을 둔 방법도 있습니다. 이러한 방법에는 검색(Yao et al., 2023; Besta et al., 2023), 반복적 피드백 수집(Yao et al., 2022), 코드 솔루션 생성을 위한 프로그램 오브 쓰트 접근 방식(Chen et al., 2022) 등이 있습니다.