The approach from the previous subsection extends to the setting where each API query returns the top \(K\) logprobs. In practice we work with \(K=5\). We are able to recover \(K\) logits. Again, instead of using a reference token to normalize the logits, we will normalize \(\sum_{j}\exp(z_{j})=1\). However, in this setting we will need to solve a \(K\)-by-\(K\) system of linear equations.
이전 하위 섹션의 접근 방식은 각 API 쿼리가 상위 \(K\) logprobs를 반환하는 설정으로 확장됩니다. 실제로는 \(K=5\)로 작업합니다. \(K\)개의 logits을 복구할 수 있습니다. 다시 말하지만, 참조 토큰을 사용하여 logits을 정규화하는 대신 \(\sum_{j}\exp(z_{j})=1\)을 정규화합니다. 그러나 이 설정에서는 \(K\)-by-\(K\) 선형 방정식 시스템을 풀어야 합니다.
이전 하위 섹션의 접근 방식은 각 API 쿼리가 상위 \(K\) 로그 확률을 반환하는 설정으로 확장됩니다. 실제로는 \(K=5\)로 작업합니다. K개의 로짓을 복구할 수 있습니다. 다시 말하지만, 참조 토큰을 사용하여 로짓을 정규화하는 대신 \(\sum_{j}\exp(z_{j})=1\)을 정규화합니다. 그러나 이 설정에서는 \(K\)-by-\(K\) 선형 방정식 시스템을 풀어야 합니다.