Biases.We conduct a basic analysis of the toxicity of RefinedWeb in Figure 4. We find RW to be about as toxic as The Pile, based on the definition of toxicity provided by the Perspective API: "content that is rude or disrespectful". Notably, this definition does not cover issues with social biases or harmfulness. Although it is unlikely that our pipeline introduces further issues on this side than is already documented for popular datasets, we encourage further quantitative work on the public extract of RefinedWeb.
편향성. 우리는 Figure 4에서 RefinedWeb의 유해성에 대한 기본 분석을 수행합니다. Perspective API에서 제공하는 유해성의 정의에 따르면, RW는 The Pile과 거의 동일한 수준의 유해성을 가지고 있음을 발견했습니다: "무례하거나 불쾌한 콘텐츠". 주목할 점은 이 정의가 사회적 편향이나 해로움과 관련된 문제를 다루지 않는다는 것입니다. 우리의 파이프라인이 인기 있는 데이터셋에 이미 문서화된 것보다 더 많은 문제를 야기할 가능성은 낮지만, RefinedWeb의 공개 추출물에 대한 추가적인 정량적 연구를 권장합니다.
편견.그림 4에서 RefinedWeb의 독성에 대한 기본 분석을 수행합니다. Perspective API에서 제공하는 독성의 정의인 "무례하거나 무례한 콘텐츠"를 기준으로 RW가 The Pile만큼 독성이 있는 것으로 나타났습니다. 특히 이 정의에는 사회적 편견이나 유해성 문제가 포함되지 않습니다. 파이프라인이 이미 대중적인 데이터 세트에 대해 문서화된 것보다 이 측면에서 추가적인 문제를 야기할 가능성은 낮지만, RefinedWeb의 공개 추출에 대한 추가적인 정량적 연구를 장려합니다.