predictions similar to what the language model would have otherwise generated. However, we observed that, in all instances, the previously-mentioned instability prevented learning. Consequently, we aimed to remove or minimize all components that could transform the language model's outputs, both with and without its rationales. We also note that our choice to use a language model to output a weight combining multiple states (as done by our mixing head) is essentially an attention mechanism allowing the model to attend to its thinking. This has similarity to the approach taken in Backpack language models (Hewitt et al., 2023), which also learn to predict weights to apply to summed input embeddings to model future text, rather than allowing the language model to output arbitrary embeddings. Despite this constraint, Backpack language models appear to have comparable performance to traditional language models (Hewitt et al., 2023).
언어 모델이 생성했을 것과 유사한 predictions을 생성했습니다. 그러나 모든 사례에서 앞서 언급한 불안정성으로 인해 학습이 이루어지지 않는다는 것을 관찰했습니다. 따라서 언어 모델의 출력을 변환할 수 있는 모든 구성 요소를 제거하거나 최소화하는 것을 목표로 했습니다. 또한 언어 모델이 여러 상태를 결합한 weight을 출력하는 데 언어 모델을 사용하는 것(믹싱 헤드에서 수행한 것처럼)은 본질적으로 모델이 자신의 생각에 주의를 기울일 수 있는 attention 메커니즘이라는 점에 주목합니다. 이는 언어 모델이 임의의 임베딩을 출력하는 대신 미래 텍스트를 모델링하기 위해 합산된 입력 임베딩에 적용할 weight을 학습하는 Backpack 언어 모델(Hewitt et al., 2023)에서 취한 접근 방식과 유사합니다. 이러한 제약에도 불구하고 Backpack 언어 모델은 기존 언어 모델과 비슷한 성능을 보이는 것으로 나타났습니다(Hewitt et al., 2023).
언어 모델이 생성했을 것과 유사한 예측을 생성했습니다. 그러나 모든 사례에서 앞서 언급한 불안정성으로 인해 학습이 이루어지지 않는다는 것을 관찰했습니다. 따라서 언어 모델의 출력을 변환할 수 있는 모든 구성 요소를 제거하거나 최소화하는 것을 목표로 했습니다. 또한 언어 모델이 여러 상태를 결합한 가중치를 출력하는 데 언어 모델을 사용하는 것(믹싱 헤드에서 수행한 것처럼)은 본질적으로 모델이 자신의 생각에 주의를 기울일 수 있는 주의 메커니즘이라는 점에 주목합니다. 이는 언어 모델이 임의의 임베딩을 출력하는 대신 미래 텍스트를 모델링하기 위해 합산된 입력 임베딩에 적용할 가중치를 학습하는 백팩 언어 모델(Hewitt et al., 2023)에서 취한 접근 방식과 유사합니다. 이러한 제약에도 불구하고 백팩 언어 모델은 기존 언어 모델과 비슷한 성능을 보이는 것으로 나타났습니다(Hewitt et al., 2023).