Thought CoT is an emerging ability primarily observed in LLMs, with limited advancements in small models. However, enhancing small models' CoT ability is conceivable through techniques like distillation. Magister et al. (2023) demonstrates that fine-tuning T5 with reasoning chains generated by larger teacher models and utilizing an external calculator for answer resolution can substantially enhance task performance across diverse datasets. Ho et al. (2023) generates and filters multiple reasoning paths to enrich the diversity.
Thought CoT는 주로 소규모 모델에서 제한적으로 발전한 LLM에서 관찰되는 새로운 능력입니다. 그러나 소형 모델의 CoT 능력을 향상시키는 것은 distillation과 같은 기술을 통해 가능합니다. Magister 외(2023)는 더 큰 교사 모델에서 생성된 추론 체인으로 T5를 Fine-tuning하고 외부 계산기를 사용하여 답변을 해결함으로써 다양한 데이터 세트에서 작업 성능을 크게 향상시킬 수 있음을 보여줍니다. Ho 외(2023)는 다양한 추론 경로를 생성하고 필터링하여 다양성을 강화합니다.
Thought CoT는 주로 소규모 모델에서 제한적으로 발전한 LLM에서 관찰되는 새로운 능력입니다. 그러나 소형 모델의 CoT 능력을 향상시키는 것은 증류와 같은 기술을 통해 가능합니다. Magister 외(2023)는 더 큰 교사 모델에서 생성된 추론 체인으로 T5를 미세 조정하고 외부 계산기를 사용하여 답변을 해결함으로써 다양한 데이터 세트에서 작업 성능을 크게 향상시킬 수 있음을 보여줍니다. Ho 외(2023)는 다양한 추론 경로를 생성하고 필터링하여 다양성을 강화합니다.