1. Title-only. We only give the article title to the model for relevance rating. Unfortunately, via manual inspection, we find the web scraper5 sometimes fails to to load the full text of an article page, usually due to rendering error or paywall. In such cases, the article content may be incomplete or simply a error message, whereas the title is retrieved and appears relevant. Consequently, the model may be misled by the title. Therefore, we believe that this approach is unviable. Footnote 5: [https://pypi.org/project/newspaper4k/](https://pypi.org/project/newspaper4k/)
2. Title + first 250 words. We give the article title and the first 250 words to the model for rating. 3. Embedding similarity. We embed the article text and question text metadata and compute their cosine similarities. We threshold by the similarities to filter articles.
1. 제목만. 관련성 등급을 위해 모델에 기사 제목만 제공합니다. 안타깝게도 수동으로 검사한 결과, 웹 스크레이퍼5가 기사 페이지의 전체 텍스트를 로드하지 못하는 경우가 있는데, 이는 일반적으로 렌더링 오류 또는 페이월로 인해 발생합니다. 이러한 경우 기사 콘텐츠가 불완전하거나 단순히 오류 메시지가 표시되는 반면 제목은 검색되어 관련성이 있는 것으로 표시됩니다. 따라서 모델이 제목에 의해 오해를 받을 수 있습니다. 따라서 이 접근 방식은 실행할 수 없다고 생각합니다. 각주 5: [https://pypi.org/project/newspaper4k/](https://pypi.org/project/newspaper4k/)
2. 제목 + 처음 250단어. 모델에 제목과 처음 250단어를 제공하여 평가합니다.
3. Embedding 유사성. 기사 텍스트와 질문 텍스트 메타데이터를 embedding하고 코사인 유사도를 계산합니다. 유사도를 기준으로 임계값을 설정하여 기사를 필터링합니다.
1. 제목만. 관련성 등급을 위해 모델에 기사 제목만 제공합니다. 안타깝게도 수동으로 검사한 결과, 웹 스크레이퍼5가 기사 페이지의 전체 텍스트를 로드하지 못하는 경우가 있는데, 이는 일반적으로 렌더링 오류 또는 페이월로 인해 발생합니다. 이러한 경우 기사 콘텐츠가 불완전하거나 단순히 오류 메시지가 표시되는 반면 제목은 검색되어 관련성이 있는 것으로 표시됩니다. 따라서 모델이 제목에 의해 오해를 받을 수 있습니다. 따라서 이 접근 방식은 실행할 수 없다고 생각합니다. 각주 5: [https://pypi.org/project/newspaper4k/](https://pypi.org/project/newspaper4k/)2. 제목 + 처음 250단어. 모델에 제목과 처음 250단어를 제공하여 평가합니다. 3. 임베딩 유사성. 기사 텍스트와 질문 텍스트 메타데이터를 임베딩하고 코사인 유사도를 계산합니다. 유사도를 기준으로 임계값을 설정하여 기사를 필터링합니다.