We evaluate the relevance scores of the full texts via GPT-4 (considered as gold labels) and compare with the approximations described above. An article is said be relevant if its rating is at least 4 from the full text query via GPT-4. We compute the recall and precision of the approximate methods as follows.
GPT-4 (골드 레이블로 간주)를 통해 전문의 관련성 점수를 평가하고 위에서 설명한 approximations와 비교합니다. 기사의 평점이 GPT-4를 통한 전체 텍스트 쿼리에서 최소 4점 이상인 경우 관련성이 있는 것으로 간주합니다. 근사 방법의 recall과 precision을 다음과 같이 계산합니다.
GPT-4(골드 레이블로 간주)를 통해 전문의 관련성 점수를 평가하고 위에서 설명한 근사치와 비교합니다. 기사의 평점이 GPT-4를 통한 전체 텍스트 쿼리에서 최소 4점 이상인 경우 관련성이 있는 것으로 간주합니다. 근사 방법의 리콜과 정밀도를 다음과 같이 계산합니다.