To enhance the reasoning ability of LLMs, [31] proposed Chain-of-Thought Prompting, which attaches multiple reasoning steps before obtaining the answer for a question. By employing the simple few-shot reasoning strategy, LLMs are able to perform better in complex reasoning problems. Least-to-Most [68] prompting decomposes the problem into sub-problems that are then solved incrementally. Additionally each step has a more detailed reasoning process. Similarly, the Complex CoT [35] underscores the pivotal role of prompt complexity by strategically choosing the most intricate problems and their corresponding solutions to function as prompts. To alleviate the burden of manual efforts, [33] introduced Auto-CoT, an approach that automates the process of acquiring k samples through the application of clustering techniques on a provided dataset. With the objective of mitigating manual intervention, [32] proposed Zero-shot-CoT, which entails the straightforward practice of appending the phrase "Let's think step by step" to each answer, eliciting the inference steps without examples. Moreover, [34] expanded upon this notion by suggesting the exploration of diverse inference paths throughout the reasoning process. Consequently, the ultimate outcome is determined through either the aggregation of answers using majority voting or by leveraging a validation mechanism, as posited by [69]. [16] employs a straightforward approach for generating augmented samples, focusing on probing the correlation between LLMs and math reasoning ability.
LLM의 추론 능력을 향상시키기 위해 [31]은 질문에 대한 답을 얻기 전에 여러 추론 단계를 첨부하는 Chain-of-Thought Prompting을 제안했습니다. 간단한 few-shot reasoning 전략을 사용하면 LLM이 복잡한 추론 문제에서 더 나은 성능을 발휘할 수 있습니다. Least-to-Most [68] prompting은 문제를 하위 문제로 분해한 다음 점진적으로 해결합니다. 또한 각 단계마다 보다 상세한 추론 프로세스가 있습니다. 마찬가지로, Complex CoT [35]는 가장 복잡한 문제와 그에 상응하는 해결책을 프롬프트로 사용하도록 전략적으로 선택함으로써 프롬프트의 복잡성이라는 중추적인 역할을 강조합니다. 수작업의 부담을 덜기 위해 [33]은 제공된 데이터 세트에 클러스터링 기법을 적용하여 k 샘플을 획득하는 프로세스를 자동화하는 접근 방식인 Auto-CoT를 도입했습니다. 수동 개입을 완화하기 위해 [32]는 예제 없이 추론 단계를 이끌어내는 각 답변에 "차근차근 생각해 봅시다"라는 문구를 추가하는 간단한 방법을 제안한 Zero-shot-CoT를 제안했습니다. 또한 [34]는 추론 과정에서 다양한 추론 경로를 탐색할 것을 제안함으로써 이 개념을 확장했습니다. 결과적으로 최종 결과는 다수결 투표를 통해 답변을 집계하거나 [69]가 제안한 것처럼 검증 메커니즘을 활용하여 결정됩니다. [16]은 LLM과 수학 추론 능력 간의 상관관계를 탐구하는 데 중점을 두고 증강 샘플을 생성하기 위한 간단한 접근 방식을 사용합니다.
LLM의 추론 능력을 향상시키기 위해 [31]은 질문에 대한 답을 얻기 전에 여러 추론 단계를 첨부하는 생각의 사슬 프롬프트를 제안했습니다. 간단한 몇 가지 추론 전략을 사용하면 LLM이 복잡한 추론 문제에서 더 나은 성능을 발휘할 수 있습니다. 최소-최대 [68] 프롬프트는 문제를 하위 문제로 분해한 다음 점진적으로 해결합니다. 또한 각 단계마다 보다 상세한 추론 프로세스가 있습니다. 마찬가지로, 복잡한 CoT [35]는 가장 복잡한 문제와 그에 상응하는 해결책을 프롬프트로 사용하도록 전략적으로 선택함으로써 프롬프트의 복잡성이라는 중추적인 역할을 강조합니다. 수작업의 부담을 덜기 위해 [33]은 제공된 데이터 세트에 클러스터링 기법을 적용하여 k 샘플을 획득하는 프로세스를 자동화하는 접근 방식인 Auto-CoT를 도입했습니다. 수동 개입을 완화하기 위해 [32]는 예제 없이 추론 단계를 이끌어내는 각 답변에 "차근차근 생각해 봅시다"라는 문구를 추가하는 간단한 방법을 제안한 Zero-shot-CoT를 제안했습니다. 또한 [34]는 추론 과정에서 다양한 추론 경로를 탐색할 것을 제안함으로써 이 개념을 확장했습니다. 결과적으로 최종 결과는 다수결 투표를 통해 답변을 집계하거나 [69]가 제안한 것처럼 검증 메커니즘을 활용하여 결정됩니다. [16]은 LLM과 수학 추론 능력 간의 상관관계를 탐구하는 데 중점을 두고 증강 샘플을 생성하기 위한 간단한 접근 방식을 사용합니다.