With respect to retrieval, our system nears the performance of the crowd when there are at least 5 relevant articles. We further observe that as the number of articles increases, our Brier score improves and surpasses the crowd's (Figure 3(a)). Intuitively, our system relies on high-quality retrieval, and when conditioned on more articles, it performs better.
검색과 관련하여, 우리 시스템은 적어도 5개의 관련 문서가 있는 경우 크라우드의 성능에 근접합니다. 또한 문서 수가 증가함에 따라 Brier score가 향상되어 크라우드를 능가하는 것을 관찰할 수 있습니다(그림 3(a)). 직관적으로, 우리 시스템은 고품질 retrieval에 의존하며 더 많은 문서를 조건으로 할 때 더 나은 성능을 발휘합니다.
검색과 관련하여, 우리 시스템은 적어도 5개의 관련 문서가 있는 경우 크라우드의 성능에 근접합니다. 또한 문서 수가 증가함에 따라 Brier 점수가 향상되어 크라우드를 능가하는 것을 관찰할 수 있습니다(그림 3(a)). 직관적으로, 우리 시스템은 고품질 검색에 의존하며 더 많은 문서를 조건으로 할 때 더 나은 성능을 발휘합니다.