While there are natural parallels between chain-of-thought prompting and our approach, they are orthogonal and complementary. In zero-shot chain-of-thought, a user actively prompts the model to think 'out loud', otherwise using its ordinary production distribution (Kojima et al., 2022); Quiet-STaR instead allows a model to think quietly at every token, with a distribution trained to be useful. We investigate using silent, Quiet-STaR, rationales while generating explicit CoT reasoning. Because our goal is generalist reasoning that requires no task-specific input at all, we used a zero-shot prompt ("Let's think step by step.") without in-context examples. Our experiments indicate that internal rationales allow the model to generate more structured and coherent chains of thought, shown in Appendix E and visualized in Figure 5. The majority vote accuracy over 8 samples (cot-maj@8) increases from 40.6% to 47.7% with Quiet-STaR, as evaluated on a sample of 128 GSM8K test items. Note that each chain-of-thought solution is sampled with temperature 0.7.
생각의 연쇄 prompting과 우리의 접근 방식 사이에는 자연스러운 유사점이 있지만, 이는 직교적이고 상호 보완적인 관계입니다. Zero-shot chain-of-thought에서 사용자는 모델이 '대중적으로' 생각하도록 적극적으로 prompting하고, 그렇지 않으면 일반적인 production distribution(Kojima et al., 2022)을 사용하지만, Quiet-STaR은 대신 모델이 모든 token에서 조용히 생각할 수 있도록 학습된 distribution을 사용합니다. 우리는 명시적인 CoT reasoning을 생성하는 동안 조용하고, Quiet-STaR, 근거를 사용하는 것을 조사합니다. 우리의 목표는 전혀 작업별 입력이 필요하지 않은 generalist reasoning이기 때문에 문맥 내 예제 없이 zero-shot prompt("차근차근 생각해 봅시다.")를 사용했습니다. 실험 결과, 내부 근거를 통해 모델이 보다 체계적이고 일관된 생각의 사슬을 생성할 수 있으며, 이는 부록 E에 나와 있고 그림 5에 시각화되어 있습니다. 128개의 GSM8K 테스트 항목 샘플을 평가한 결과, 8개의 샘플에 대한 다수결 정확도(cot-maj@8)가 40.6%에서 47.7%로 Quiet-STaR을 사용하면 증가합니다. 각 chain-of-thought 솔루션은 온도 0.7로 샘플링된다는 점에 유의하세요.
생각의 연쇄 프롬프트와 우리의 접근 방식 사이에는 자연스러운 유사점이 있지만, 이는 직교적이고 상호 보완적인 관계입니다. 제로샷 연쇄 사고에서 사용자는 모델이 '대중적으로' 생각하도록 적극적으로 프롬프트하고, 그렇지 않으면 일반적인 생산 분포(코지마 등, 2022)를 사용하지만, Quiet-STaR은 대신 모델이 모든 토큰에서 조용히 생각할 수 있도록 학습된 분포를 사용합니다. 우리는 명시적인 CoT 추론을 생성하는 동안 조용하고, Quiet-STaR, 근거를 사용하는 것을 조사합니다. 우리의 목표는 전혀 작업별 입력이 필요하지 않은 일반주의 추론이기 때문에 문맥 내 예제 없이 제로샷 프롬프트("차근차근 생각해 봅시다.")를 사용했습니다. 실험 결과, 내부 근거를 통해 모델이 보다 체계적이고 일관된 생각의 사슬을 생성할 수 있으며, 이는 부록 E에 나와 있고 그림 5에 시각화되어 있습니다. 128개의 GSM8K 테스트 항목 샘플을 평가한 결과, 8개의 샘플에 대한 다수결 정확도(cot-maj@8)가 40.6%에서 47.7%로 Quiet-STaR을 사용하면 증가합니다. 각 생각의 사슬 솔루션은 온도 0.7로 샘플링된다는 점에 유의하세요.