Recent works have shown that LLMs demonstrate remarkable in-context reasoning ability via prompting, which scales with model size (Brown et al., 2020; Wei et al., 2022, 2022). On the contrary, when the information to reason from is not explicitly given as part of the input, LLMsoften fail to correctly perform multi-hop reasoning even when they know the answer to the single-hop sub-step (Ofir Press et al., 2023; Dziri et al., 2023). While there have been wide investigations on how in-context reasoning works (Chan et al., 2022; Akyurek et al., 2023; Dai et al., 2023; Von Oswald et al., 2023; Prystawski and Goodman, 2023; Feng and Steinhardt, 2024), such an investigation has not been actively done to understand how latent multi-hop reasoning works.
최근 연구에 따르면 LLM은 prompting을 통해 놀라운 In-Context reasoning 능력을 보여주며, 이는 모델 크기에 따라 확장됩니다(Brown et al., 2020; Wei et al., 2022, 2022). 반대로 추론해야 할 정보가 입력의 일부로 명시적으로 제공되지 않을 경우, LLM은 단일 홉 하위 단계에 대한 답을 알고 있더라도 종종 다중 홉 추론을 올바르게 수행하지 못합니다(Ofir Press et al., 2023; Dziri et al., 2023). In-Context reasoning이 어떻게 작동하는지에 대한 광범위한 조사가 진행되고 있지만(Chan et al., 2022; Akyurek et al., 2023; Dai et al., 2023; Von Oswald et al., 2023; Prystawski and Goodman, 2023; Feng and Steinhardt, 2024), 잠재적 다중 홉 추론이 어떻게 작동하는지 이해하기 위한 조사는 활발하게 이루어지지 않았습니다.
최근 연구에 따르면 LLM은 프롬프트를 통해 놀라운 상황 맞춤형 추론 능력을 보여주며, 이는 모델 크기에 따라 확장됩니다(Brown et al., 2020; Wei et al., 2022, 2022). 반대로 추론해야 할 정보가 입력의 일부로 명시적으로 제공되지 않을 경우, LLM은 단일 홉 하위 단계에 대한 답을 알고 있더라도 종종 다중 홉 추론을 올바르게 수행하지 못합니다(Ofir Press et al., 2023; Dziri et al., 2023). 상황에 맞는 추론이 어떻게 작동하는지에 대한 광범위한 조사가 진행되고 있지만(Chan et al., 2022; Akyurek et al., 2023; Dai et al., 2023; Von Oswald et al., 2023; Prystawski and Goodman, 2023; Feng and Steinhardt, 2024), 잠재적 다중 홉 추론이 어떻게 작동하는지 이해하기 위한 조사는 활발하게 이루어지지 않았습니다.