Suppose that the query returns token \(k\) as output when the logit bias was set to \(\{i:b_{i}\}\) for \(i=1,\ldots,l\) and the prompt is \(p\). Then, we know that \(\mathsf{logit}_{k}+b_{k}\geq\mathsf{logit}_{j}+b_{j}\) for all \(j\neq k\) by the definition of the API.
쿼리가 \(i=1,\ldots,l\)에 대해 로짓 바이어스가 \(\{i:b_{i}\}\)로 설정되고 프롬프트가 \(p\)일 때 토큰 \(k\)를 출력한다고 가정해봅시다. 그러면 API의 정의에 따라 모든 \(j\neq k\)에 대해 \(\mathsf{logit}_{k}+b_{k}\geq\mathsf{logit}_{j}+b_{j}\)임을 알 수 있습니다.
로그 비즈가 \(i=1,\ldots,l\)에 대해 \(\{i:b_{i}\}\)로 설정되고 프롬프트가 \(p\)일 때 쿼리가 토큰 \(k\)를 출력으로 반환한다고 가정합니다. 그러면 API의 정의에 따라 모든 \(j\neq k\)에 대해 \(\mathsf{logit}_{k}+b_{k}\geq\mathsf{logit}_{j}+b_{j}\)가 된다는 것을 알 수 있습니다.