Among the various datasets offering factual QA (Christmann et al., 2023; Sciavolino et al., 2021), we selected one of the most recent ones, named PopQA (Mallen et al., 2023). PopQA dataset comprises approximately 14,000 templated questions aimed at eliciting single-entity answers, based on 16 types of relationships extracted from Wikipedia. To assess the popularity of each entity, we followed the previous studies (Mallen et al., 2023; Sciavolino et al., 2021; Chen et al., 2021), using Wikipedia pageviews as a metric for popularity. We accumulated the pageviews for each entity from the start to the end of 2023.
사실에 입각한 QA를 제공하는 다양한 데이터 세트(Christmann et al., 2023; Sciavolino et al., 2021) 중에서 가장 최근의 데이터 세트 중 하나인 PopQA(Mallen et al., 2023)를 선택했습니다. PopQA 데이터 세트는 Wikipedia에서 추출한 16가지 유형의 관계를 기반으로 단일 엔티티 답변을 이끌어내기 위한 약 14,000개의 템플릿 질문으로 구성되어 있습니다. 각 엔티티의 인기를 평가하기 위해 이전 연구(Mallen et al., 2023; Sciavolino et al., 2021; Chen et al., 2021)를 따라 Wikipedia pageviews를 인기 지표로 사용했습니다. 2023년 초부터 말까지 각 엔티티의 pageviews를 누적했습니다.
사실에 입각한 QA를 제공하는 다양한 데이터 세트(Christmann et al., 2023; Sciavolino et al., 2021) 중에서 가장 최근의 데이터 세트 중 하나인 PopQA(Mallen et al., 2023)를 선택했습니다. PopQA 데이터 세트는 위키피디아에서 추출한 16가지 유형의 관계를 기반으로 단일 엔티티 답변을 이끌어내기 위한 약 14,000개의 템플릿 질문으로 구성되어 있습니다. 각 엔티티의 인기를 평가하기 위해 이전 연구(Mallen et al., 2023; Sciavolino et al., 2021; Chen et al., 2021)를 따라 위키피디아 페이지뷰를 인기 지표로 사용했습니다. 2023년 초부터 말까지 각 엔티티의 페이지뷰를 누적했습니다.