Figure 7: **Distribution of changes in log probability**. We visualize the distribution of changes in log probability resulting from the generated thoughts across the evaluation dataset. We visualize the density of changes in log probability relative to the LM without thoughts, colored based on log density. The distribution is skewed, with most tokens unaffected, while a small fraction of hard tokens see substantial improvements from the thoughts. This matches our intuition that most tokens in general web text do not require significant reasoning to predict, but thoughts are disproportionately beneficial for challenging tokens.
그림 7: **로그 확률 변화의 분포**. 평가 데이터 세트 전체에 걸쳐 생성된 생각으로 인한 log probability 변화의 분포를 시각화합니다. 생각이 없는 LM에 대한 log probability 변화의 밀도를 log density에 따라 색상으로 표시하여 시각화합니다. 대부분의 토큰은 영향을 받지 않는 반면, 일부 어려운 토큰은 생각으로 인해 상당한 개선을 보이는 등 분포가 기울어져 있습니다. 이는 일반 웹 텍스트의 대부분의 토큰은 예측하기 위해 상당한 reasoning이 필요하지 않지만, 생각은 어려운 토큰에 불균형적으로 유리하다는 우리의 직관과 일치합니다.
그림 7: **로그 확률 변화의 분포**. 평가 데이터 세트 전체에 걸쳐 생성된 생각으로 인한 로그 확률 변화의 분포를 시각화합니다. 생각이 없는 LM에 대한 로그 확률 변화의 밀도를 로그 밀도에 따라 색상으로 표시하여 시각화합니다. 대부분의 토큰은 영향을 받지 않는 반면, 일부 어려운 토큰은 생각으로 인해 상당한 개선을 보이는 등 분포가 기울어져 있습니다. 이는 일반 웹 텍스트의 대부분의 토큰은 예측하기 위해 상당한 추론이 필요하지 않지만, 생각은 어려운 토큰에 불균형적으로 유리하다는 우리의 직관과 일치합니다.