\(\bullet\)_The source of CoT reasoning ability._ Regarding the source of CoT reasoning capability, it is widely hypothesized that it can be attributed to training on code since models trained on it show a strong reasoning ability [520, 47, 521]. Intuitively, code data is well organized with algorithmic logic and programming flow, which may be useful to improve the reasoning performance of LLMs. However, this hypothesis still lacks publicly reported evidence of ablation experiments (_with_ and _without_ training on code). In addition, instruction tuning seems not to be the key reason for obtaining the CoT reasoning ability, since it has been empirically shown that instruction tuning on non-CoT data does not improve the performance on held-out CoT reasoning benchmarks [69].
\(\bullet\)_CoT 추론 능력의 원천._ CoT 추론 능력의 원천에 대해서는 코드에 대한 훈련을 받은 모델이 강력한 추론 능력을 보여주기 때문에 코드에 대한 훈련 때문일 수 있다는 가설이 널리 알려져 있습니다[520, 47, 521]. 직관적으로 코드 데이터는 알고리즘 논리와 프로그래밍 흐름으로 잘 정리되어 있어 LLM의 추론 성능을 향상시키는 데 유용할 수 있습니다. 그러나 이 가설은 아직 공개적으로 보고된 코드에 대한 폐기 실험(_with_ 및 _without_)의 증거가 부족합니다. 또한 Instruction Tuning이 CoT 추론 능력을 얻는 데 핵심적인 이유가 아닌 것으로 보입니다. 이는 비CoT 데이터에 대한 Instruction Tuning이 보류된 CoT 추론 벤치마크의 성능을 향상시키지 못한다는 경험적 결과가 보고되었기 때문입니다[69].
\(\bullet\)_CoT 추론 능력의 원천._ CoT 추론 능력의 원천에 대해서는 코드에 대한 훈련을 받은 모델이 강력한 추론 능력을 보여주기 때문에 코드에 대한 훈련 때문일 수 있다는 가설이 널리 알려져 있습니다[520, 47, 521]. 직관적으로 코드 데이터는 알고리즘 논리와 프로그래밍 흐름으로 잘 정리되어 있어 LLM의 추론 성능을 향상시키는 데 유용할 수 있습니다. 그러나 이 가설은 아직 공개적으로 보고된 코드에 대한 폐기 실험(_with_ 및 _without_)의 증거가 부족합니다. 또한 비CoT 데이터에 대한 지침 튜닝이 보류된 CoT 추론 벤치마크의 성능을 향상시키지 못한다는 경험적 결과가 보고되었기 때문에 지침 튜닝이 CoT 추론 능력을 얻는 데 핵심적인 이유가 아닌 것으로 보입니다[69].