In sum, fixing recall at above 70%, querying GPT-3.5-Turbo with title + first 250 words attains the highest precision. The average token length of the articles is 1087.6. Hence, the method of using first 250 words (or roughly 330 tokens) saves about 70% of the cost.
요약하면, 리콜을 70% 이상으로 고정하고 제목과 처음 250단어로 GPT-3.5-Turbo를 쿼리하면 정확도가 가장 높아집니다. 문서의 평균 token 길이는 1087.6입니다. 따라서 처음 250단어(또는 약 330 tokens)를 사용하는 방법은 비용의 약 70%를 절약할 수 있습니다.
요약하면, 리콜을 70% 이상으로 고정하고 제목과 처음 250단어로 GPT-3.5-Turbo를 쿼리하면 정확도가 가장 높아집니다. 문서의 평균 토큰 길이는 1087.6입니다. 따라서 처음 250단어(또는 약 330토큰)를 사용하는 방법은 비용의 약 70%를 절약할 수 있습니다.