**Rationale Evaluation and Refinement.** In contexts beyond rationale distillation, there have been growing efforts to unravel which aspects of the generated reasoning steps contribute to the downstream task performance. Wang et al. (2022a) report that rationales' logicality and relevance to the query are key factors in successful CoT reasoning. Few studies have measured the validity of reasoning steps from the lens of more diverse aspects like informativeness, coherence, and repetition, etc (Golovneva et al., 2022; Prasad et al., 2023). While RL has gained popularity as an approach for addressing misaligned behaviors in LMs, the field of rationale correction has seen limited research.
**근거 평가 및 구체화**. 근거 증류를 넘어서는 맥락에서, 생성된 추론 단계의 어떤 측면이 다운스트림 작업 성능에 기여하는지 밝히기 위한 노력이 증가하고 있습니다. Wang 등(2022a)은 근거의 논리성과 쿼리와의 관련성이 성공적인 CoT 추론의 핵심 요소라고 보고했습니다. 정보성, 일관성, 반복성 등과 같은 보다 다양한 측면의 렌즈를 통해 추론 단계의 타당성을 측정한 연구는 거의 없습니다(Golovneva et al., 2022; Prasad et al., 2023). While Reinforcement Learning (RL)은 Large Language Models (LLMs)에서 잘못 정렬된 행동을 해결하기 위한 접근 방식으로 인기를 얻고 있지만, 근거 수정 분야에서는 제한된 연구가 진행되고 있습니다.
**근거 평가 및 구체화**. 근거 증류를 넘어서는 맥락에서, 생성된 추론 단계의 어떤 측면이 다운스트림 작업 성능에 기여하는지 밝히기 위한 노력이 증가하고 있습니다. Wang 등(2022a)은 근거의 논리성과 쿼리와의 관련성이 성공적인 CoT 추론의 핵심 요소라고 보고했습니다. 정보성, 일관성, 반복성 등과 같은 보다 다양한 측면의 렌즈를 통해 추론 단계의 타당성을 측정한 연구는 거의 없습니다(Golovneva et al., 2022; Prasad et al., 2023). RL은 LM에서 잘못 정렬된 행동을 해결하기 위한 접근 방식으로 인기를 얻고 있지만, 근거 수정 분야에서는 제한된 연구가 진행되고 있습니다.