While there is no explicit regularization in Quiet-STaR for thoughts to be human-interpretable, they are generated from the same transformer trained to model language, hence likely to be at least partially understandable. We discuss why this design choice benefits the training stability in Appendix I. For reference, we include examples of thoughts generated that were helpful to the model in predicting future tokens in OpenWebMath. First, in one case, recalling that one should start with magnesium to produce magnesium nitride allows it to better predict that the first step of the procedure involves heating magnesium.
생각이 사람이 해석할 수 있도록 Quiet-STaR에 명시적인 regularization이 없지만, 언어를 모델링하도록 훈련된 동일한 Transformer에서 생성되므로 적어도 부분적으로는 이해할 수 있을 것으로 보입니다. 이 설계 방식이 훈련 안정성에 도움이 되는 이유에 대해서는 부록 I에서 설명합니다. 참고로, OpenWebMath에서 모델이 미래 토큰을 예측하는 데 도움이 된 생각의 예를 포함합니다. 첫째, 질화마그네슘을 생산하기 위해 마그네슘으로 시작해야 한다는 것을 기억하면 절차의 첫 번째 단계가 마그네슘을 가열하는 것임을 더 잘 예측할 수 있습니다.
생각이 사람이 해석할 수 있도록 Quiet-STaR에 명시적인 정규화가 없지만, 언어를 모델링하도록 훈련된 동일한 트랜스포머에서 생성되므로 적어도 부분적으로는 이해할 수 있을 것으로 보입니다. 이 설계 방식이 훈련 안정성에 도움이 되는 이유에 대해서는 부록 I에서 설명합니다. 참고로, OpenWebMath에서 모델이 미래 토큰을 예측하는 데 도움이 된 생각의 예를 포함합니다. 첫째, 질화마그네슘을 생산하기 위해 마그네슘으로 시작해야 한다는 것을 기억하면 절차의 첫 번째 단계가 마그네슘을 가열하는 것임을 더 잘 예측할 수 있습니다.