Despite the significant advancements Large Language Models (LLMs) have achieved across various tasks, they continue to encounter difficulties with multi-step reasoning problems (Lightman et al., 2023; Huang et al., 2023; Shi et al., 2023; Chen et al., 2024). A primary challenge in reasoning arises from the fact that even a minor error can disrupt the entire solution process (Lightman et al., 2023). This issue is compounded in state-of-the-art models, which often suffer from hallucinations that lead to such errors (Huang et al., 2023). Analyses of the error patterns in mathematical reasoning tasks performed by GPT-3 reveal that over 50% of errors stem from either a misunderstanding of the problem or from incoherent reasoning steps (Wei et al., 2022).
대규모 언어 모델(LLMs)이 다양한 작업에서 상당한 발전을 이루었음에도 불구하고 다단계 추론 문제(Lightman et al., 2023; Huang et al., 2023; Shi et al., 2023; Chen et al., 2024)에서 계속해서 어려움을 겪고 있습니다. 추론의 주요 과제는 사소한 오류라도 전체 솔루션 프로세스를 방해할 수 있다는 사실에서 비롯됩니다(Lightman et al., 2023). 이 문제는 최신 모델에서 더욱 심화되는데, 이러한 오류를 유발하는 hallucination 현상을 자주 겪기 때문입니다(Huang et al., 2023). GPT-3가 수행한 수학적 추론 과제의 오류 패턴을 분석한 결과, 오류의 50% 이상이 문제를 오해하거나 불일치하는 추론 단계에서 비롯된 것으로 나타났습니다(Wei et al., 2022).
대규모 언어 모델(LLM)이 다양한 작업에서 상당한 발전을 이루었음에도 불구하고 다단계 추론 문제(Lightman et al., 2023; Huang et al., 2023; Shi et al., 2023; Chen et al., 2024)에서 계속해서 어려움을 겪고 있습니다. 추론의 주요 과제는 사소한 오류라도 전체 솔루션 프로세스를 방해할 수 있다는 사실에서 비롯됩니다(Lightman et al., 2023). 이 문제는 최신 모델에서 더욱 심화되는데, 이러한 오류를 유발하는 환각 현상을 자주 겪기 때문입니다(Huang et al., 2023). GPT-3가 수행한 수학적 추론 과제의 오류 패턴을 분석한 결과, 오류의 50% 이상이 문제를 오해하거나 불일치하는 추론 단계에서 비롯된 것으로 나타났습니다(Wei et al., 2022).