The previous sections assume we have access to the full language model output probability vector. However, many language model platforms limit the information returned from API calls. For example, a well-known service's API only exposes either samples or the top-5 log probabilities, but does not expose all output probabilities for a given input.
이전 섹션에서는 전체 language model 출력 확률 벡터에 액세스할 수 있다고 가정했습니다. 그러나 많은 language model 플랫폼에서는 API 호출에서 반환되는 정보를 제한합니다. 예를 들어, 잘 알려진 서비스의 API는 샘플 또는 상위 5개의 log 확률만 노출할 뿐, 주어진 입력에 대한 모든 출력 확률을 노출하지 않습니다.
이전 섹션에서는 전체 언어 모델 출력 확률 벡터에 액세스할 수 있다고 가정했습니다. 그러나 많은 언어 모델 플랫폼에서는 API 호출에서 반환되는 정보를 제한합니다. 예를 들어, 잘 알려진 서비스의 API는 샘플 또는 상위 5개의 로그 확률만 노출할 뿐, 주어진 입력에 대한 모든 출력 확률을 노출하지 않습니다.