Because the language model can insert thoughts anywhere, we perform a preliminary study where we investigate the reasoning generated by the language model when it has access to internal rationales while it generates external rationales (i.e. chains-of-thought) to solve a problem. Because these chains of thought are themselves generated by chains of thought, one might refer to this as a net-of-thought (or NoT). We compare five solutions from the model to a fixed random question in GSM8K, looking at outputs of the base Mistral 7B, the outputs of Mistral fine-tuned for the same number of steps on OpenWebMath (Paster et al., 2023), and the rationales of our best Quiet-STaR model. We sample from all of them directly, at temperature \(t=1\).
언어 모델은 어디든 생각을 삽입할 수 있기 때문에, 언어 모델이 외부 추론(즉, chains-of-thought)에 접근할 수 있는 상태에서 생성하는 추론을 조사하는 예비 연구(문제 해결을 위한 chains-of-thought)를 수행합니다. 이러한 chains-of-thought은 그 자체로 chains-of-thought에 의해 생성되기 때문에 이를 net-of-thought (또는 NoT)라고 할 수 있습니다. 우리는 GSM8K에서 모델의 5가지 솔루션을 고정된 랜덤 질문과 비교하여 기본 Mistral 7B의 출력, OpenWebMath에서 동일한 단계 수에 맞게 Fine-tuning된 Mistral의 출력, 최고 Quiet-STaR 모델의 근거를 살펴봅니다. 우리는 모든 모델에서 온도 \(t=1\)에서 직접 샘플링합니다.
언어 모델은 어디든 생각을 삽입할 수 있기 때문에, 언어 모델이 외부 추론(즉, 생각의 사슬)에 접근할 수 있는 상태에서 생성하는 추론을 조사하는 예비 연구(문제 해결을 위한 생각의 사슬)를 수행합니다. 이러한 생각의 사슬은 그 자체로 생각의 사슬에 의해 생성되기 때문에 이를 생각의 그물(또는 NoT)이라고 할 수 있습니다. 우리는 GSM8K에서 모델의 5가지 솔루션을 고정된 랜덤 질문과 비교하여 기본 Mistral 7B의 출력, OpenWebMath에서 동일한 단계 수에 맞게 미세 조정된 Mistral의 출력, 최고 Quiet-STaR 모델의 근거를 살펴봅니다. 우리는 모든 모델에서 온도 \(t=1\)에서 직접 샘플링합니다.