We formalize this problem of prompt reconstruction as _language model inversion_, recovering the input prompt conditioned on the language model's next-token probabilities. Interestingly, work in computer vision has shown that probability predictions of image classifiers retain a surprising amount of detail (Dosovitskiy & Brox, 2016), so it is plausible that this also holds for language models. We propose an architecture that predicts prompts by"unrolling" the distribution vector into a sequence that can be processed effectively by a pretrained encoder-decoder language model. This method shows for the first time that language model predictions are mostly invertible: in many cases, we are able to recover very similar inputs to the original, sometimes getting the input text back exactly.
프롬프트 재구성 문제를 _language model inversion_으로 공식화합니다. 이는 언어 모델의 다음 토큰 확률에 따라 조건이 지정된 입력 프롬프트를 복구하는 것입니다. 흥미롭게도 컴퓨터 비전 분야의 연구에 따르면 이미지 분류기의 확률 예측은 놀라운 양의 세부 정보를 유지한다고 합니다(Dosovitskiy & Brox, 2016), 따라서 언어 모델에도 마찬가지로 적용될 수 있습니다. 우리는 분포 벡터를 미리 학습된 Encoder-Decoder 언어 모델에 의해 효과적으로 처리될 수 있는 시퀀스로 "unrolling"하여 프롬프트를 예측하는 아키텍처를 제안합니다. 이 방법은 언어 모델의 예측이 대부분 반전 가능하다는 것을 처음으로 보여줍니다. 많은 경우 원본과 매우 유사한 입력을 복구할 수 있으며, 때로는 입력 텍스트를 정확히 되찾을 수도 있습니다.
프롬프트 재구성 문제를 언어 모델의 다음 토큰 확률에 따라 조건이 지정된 입력 프롬프트를 복구하는 _언어 모델 반전_으로 공식화합니다. 흥미롭게도 컴퓨터 비전 분야의 연구에 따르면 이미지 분류기의 확률 예측은 놀라운 양의 세부 정보를 유지한다고 합니다(Dosovitskiy & Brox, 2016), 따라서 언어 모델에도 마찬가지로 적용될 수 있습니다. 우리는 분포 벡터를 미리 학습된 인코더-디코더 언어 모델에 의해 효과적으로 처리될 수 있는 시퀀스로 "언롤링"하여 프롬프트를 예측하는 아키텍처를 제안합니다. 이 방법은 언어 모델의 예측이 대부분 반전 가능하다는 것을 처음으로 보여줍니다. 많은 경우 원본과 매우 유사한 입력을 복구할 수 있으며, 때로는 입력 텍스트를 정확히 되찾을 수도 있습니다.