We now consider the problem of inverting the process: given the probability vector, we attempt to produce the prompt that led to these next-token probabilities. Given some unseen model \(f:\mathcal{V}^{T}\rightarrow\Delta^{|\mathcal{V}|-1}\) which gives next-token probabilities, we would like to learn to invert this function from samples: pairs of text prefixes and their associated next-token probability vectors \((x_{1:T}^{1},\mathbf{v}^{1})\ldots(x_{1:T}^{J},\mathbf{v}^{J})\).
이제 우리는 이 과정을 역으로 수행하는 문제를 고려합니다: 확률 벡터가 주어졌을 때, 이러한 다음 토큰 확률을 유도한 프롬프트를 생성하려고 시도합니다. 다음 토큰 확률을 제공하는 어떤 보지 못한 모델 \(f:\mathcal{V}^{T}\rightarrow\Delta^{|\mathcal{V}|-1}\)이 주어졌을 때, 우리는 샘플로부터 이 함수를 역으로 학습하고자 합니다: 텍스트 접두사와 그에 연관된 다음 토큰 확률 벡터의 쌍 \((x_{1:T}^{1},\mathbf{v}^{1})\ldots(x_{1:T}^{J},\mathbf{v}^{J})\).
이제 프로세스를 반전시키는 문제를 고려합니다. 확률 벡터가 주어지면 이러한 다음 토큰 확률을 유도한 프롬프트를 생성하려고 시도합니다. 다음 토큰 확률을 제공하는 보이지 않는 모델 \(f:\mathcal{V}^{T}\rightarrow\Delta^{|\mathcal{V}|-1}\)가 주어지면, 이 함수를 샘플에서 반전하는 방법을 학습하고자 합니다. 즉, 텍스트 접두사 쌍과 그와 관련된 다음 토큰 확률 벡터 \((x_{1:T}^{1},\mathbf{v}^{1})\ldots(x_{1:T}^{J},\mathbf{v}^{J})\).