Chain-of-thought (CoT) [31] proposes to design better prompts to generate step-by-step solutions, which can lead to improved performance. Self-Consistency [34] also achieves remarkable performance on many reasoning benchmarks, which generates several possible answers from the model and selects the correct one based on majority vote [35]. In recent, [36] finds that process supervision with reinforcement learning significantly outperforms outcome supervision for solving challenging MATH problems.
생각의 사슬(Chain-of-thought, CoT) [31]은 단계별 솔루션을 생성하기 위해 더 나은 프롬프트를 설계하여 성능을 개선할 수 있도록 제안합니다. Self-Consistency [34]도 많은 추론 벤치마크에서 놀라운 성능을 달성하며, 모델에서 가능한 여러 답을 생성하고 다수결에 따라 정답을 선택합니다 [35]. 최근 [36]은 Reinforcement Learning을 통한 프로세스 감독이 까다로운 MATH 문제 해결에 있어 결과 감독보다 훨씬 뛰어난 성능을 발휘한다는 사실을 발견했습니다.
생각의 사슬(CoT) [31]은 단계별 솔루션을 생성하기 위해 더 나은 프롬프트를 설계하여 성능을 개선할 수 있도록 제안합니다. 자체 일관성 [34]도 많은 추론 벤치마크에서 놀라운 성능을 달성하며, 모델에서 가능한 여러 답을 생성하고 다수결에 따라 정답을 선택합니다 [35]. 최근 [36]은 강화 학습을 통한 프로세스 감독이 까다로운 수학 문제 해결에 있어 결과 감독보다 훨씬 뛰어난 성능을 발휘한다는 사실을 발견했습니다.