Rate limits on logit bias.Our attack requires that we are able to learn at least \(h\) logit values for each prompt \(p\). One defense would be to allow logit-bias queries to the model, but only allow \(T=\tilde{h}/5\) logit bias queries for any given prompt \(p\) to prevent an adversary from learning if a model has hidden dimension \(\tilde{h}\) or smaller.
로짓 바이어스에 대한 속도 제한. 우리의 공격은 각 프롬프트 \(p\)에 대해 최소 \(h\) logit 값을 학습할 수 있어야 합니다. 한 가지 방어 방법은 모델에 logit-bias 쿼리를 허용하되, 적대자가 모델에 숨겨진 차원 \(\tilde{h}\) 이하를 학습하는 것을 방지하기 위해 주어진 프롬프트 \(p\)에 대해 \(T=\tilde{h}/5\) logit bias 쿼리만 허용하는 것입니다.
로짓 바이어스에 대한 속도 제한.우리의 공격은 각 프롬프트 \(p\)에 대해 최소 \(h\) 로짓 값을 학습할 수 있어야 합니다. 한 가지 방어 방법은 모델에 로짓 바이어스 쿼리를 허용하되, 적대자가 모델에 숨겨진 차원 \(\tilde{h}\) 이하를 학습하는 것을 방지하기 위해 주어진 프롬프트 \(p\)에 대해 \(T=\tilde{h}/5\) 로짓 바이어스 쿼리만 허용하는 것입니다.