Assumptions of our threat model.We motivate this problem by the prevalence of language models as a service. In these use cases we assume that an unknown prefix sequence, known as the _prompt_, is prepended to the user input. We consider varying levels of model access: full distributional access, partial distributional access (top-K or by request), text output with user-defined logit bias, and text output access only. We assume no access to the model weights or activations.
위협 모델의 가정. 우리는 서비스로서의 언어 모델의 보급으로 이 문제에 대한 동기를 부여합니다. 이러한 사용 사례에서는 사용자 입력 앞에 _prompt_라고 알려진 알 수 없는 접두사 시퀀스가 선행되어 있다고 가정합니다. 전체 배포 액세스, 부분 배포 액세스(상위 K 또는 요청에 의한 액세스), 사용자 정의 logit bias가 있는 텍스트 출력, 텍스트 출력 액세스만 허용하는 등 다양한 수준의 모델 액세스를 고려합니다. 모델 가중치나 활성화에 대한 액세스는 허용하지 않는다고 가정합니다.
위협 모델의 가정. 우리는 서비스로서의 언어 모델의 보급으로 이 문제에 대한 동기를 부여합니다. 이러한 사용 사례에서는 사용자 입력 앞에 _프롬프트_라고 알려진 알 수 없는 접두사 시퀀스가 선행되어 있다고 가정합니다. 전체 배포 액세스, 부분 배포 액세스(상위 K 또는 요청에 의한 액세스), 사용자 정의 로그 비즈가 있는 텍스트 출력, 텍스트 출력 액세스만 허용하는 등 다양한 수준의 모델 액세스를 고려합니다. 모델 가중치나 활성화에 대한 액세스는 허용하지 않는다고 가정합니다.