API:We use the same API as in the previous section, with the additional constraint that the \(\mathcal{O}\) accepts at most \(N+1\) tokens in the logit bias dictionary. We again first run a query \(\mathcal{O}(p,b=\{\})\) to identify the most likely token and set its index to \(0\). Our goal is to approximate \(\mathsf{logit}_{i}-\mathsf{logit}_{0}\) for \(N\) different tokens. If \(N<l-1\), we simply repeat the same algorithm for different batches of \(N\) tokens \(\frac{l-1}{N}\) times.
API: 이전 섹션과 동일한 API를 사용하며, 추가로 \(\mathcal{O}\)가 logit bias 사전에서 최대 \(N+1\) tokens만 허용한다는 제약 조건이 있습니다. 다시 한 번 쿼리 \(\mathcal{O}(p,b=\{\})\)를 실행하여 가장 가능성이 높은 token을 식별하고 해당 인덱스를 \(0\)으로 설정합니다. 우리의 목표는 \(N\)개의 서로 다른 tokens에 대해 \(\mathsf{logit}_{i}-\mathsf{logit}_{0}\)를 근사화하는 것입니다. \(N<l-1\)인 경우, 다른 tokens \(N\)개의 배치에 대해 동일한 알고리즘을 \(\frac{l-1}{N}\)번 반복하기만 하면 됩니다.
API: 이전 섹션과 동일한 API를 사용하며, 추가로 \(\mathcal{O}\)가 로짓 바이어스 사전에서 최대 \(N+1\) 토큰만 허용한다는 제약 조건이 있습니다. 다시 한 번 쿼리 \(\mathcal{O}(p,b=\{\})\)를 실행하여 가장 가능성이 높은 토큰을 식별하고 해당 인덱스를 \(0\)으로 설정합니다. 우리의 목표는 \(N\)개의 서로 다른 토큰에 대해 \(\mathsf{logit}_{i}-\mathsf{logit}_{0}\)를 근사화하는 것입니다. N<l-1\)인 경우, 다른 토큰 \(N\)개의 배치에 대해 동일한 알고리즘을 \(\frac{l-1}{N}\)번 반복하기만 하면 됩니다.