\begin{table}
\begin{tabular}{l l l} \hline \hline
**Category** & **Description** & **Number of links** \\ \hline adult & adult websites: from eroticism to hard pornography & 4516478 \\ phishing & phishing websites, malwares, etc. & 42445 \\ dating & dating websites & 3829 \\ gambling & online casino & 1365 \\ filehosting & websites hosting files, videos, pictures, music & 909 \\ ddos & websites related to ddos attacks & 421 \\ agressif & hate, racism, etc & 390 \\ chat & online chat websites & 244 \\ mixed adult & websites with some adult content & 153 \\ ariel & French regulated gambling websites & 69 \\ \hline \hline \end{tabular}
\end{table}
Table 13: **We select categories likely to contain adult or malicious content, as well as spam or unstructured text.**We curated the lists based on manual inspection of the data, informed by top hits reported by ToxicBERT. For the strict subword matching, we included words that were unequivocally related to adult content (e.g., groupsex). We avoided partial unclear matches (e.g., ass), that may be part of neutral words (e.g., massachusetts). In the soft word list, we included words that do not constitute a sufficient reason to discard the document on their own, but which are suspicious when multiple words from the list result in a match. This helped with keeping medical or legal content unaffected (e.g., a single match of dick).
\begin{table}
\begin{tabular}{l l l} \hline \hline
**카테고리** & **설명** & **링크 수** \\ \hline 성인 & 에로티시즘에서 하드 포르노에 이르는 성인 웹사이트 & 4516478 \\ 피싱 & 피싱 웹사이트, 멀웨어 등 & 42445 \\ 데이트 & 데이트 웹사이트 & 3829 \\ 갬블링 & 온라인 카지노 & 1365 \\ 파일 호스팅 & 파일, 동영상, 사진, 음악을 호스팅하는 웹사이트 & 909 \\ ddos & ddos 공격과 관련된 웹사이트 & 421 \\ 공격적 & 증오, 인종차별 등 & 390 \\ 채팅 & 온라인 채팅 웹사이트 & 244 \\ 혼합 성인 & 일부 성인 콘텐츠가 포함된 웹사이트 & 153 \\ ariel & 프랑스 규제 도박 웹사이트 & 69 \\ \hline \hline \end{tabular}
\end{table}
표 13: **성인 또는 악성 콘텐츠, 스팸 또는 비정형 텍스트가 포함될 가능성이 높은 카테고리를 선택합니다.**ToxicBERT가 보고한 상위 검색어를 기반으로 데이터를 수동으로 검사하여 목록을 큐레이션했습니다. 엄격한 하위 단어 매칭의 경우 성인 콘텐츠와 명백히 관련된 단어(예: groupsex)를 포함시켰습니다. 중립적인 단어(예: massachusetts)의 일부일 수 있는 부분적으로 불분명한 일치(예: ass)는 피했습니다. 부드러운 단어 목록에는 문서를 폐기할 충분한 이유가 되지는 않지만 목록의 여러 단어가 일치할 경우 의심스러운 단어를 포함시켰습니다. 이렇게 하면 의료 또는 법률 콘텐츠에 영향을 미치지 않고 유지하는 데 도움이 됩니다(예: dick의 단일 일치).
\begin{table}
\begin{tabular}{l l l} \hline \hline
**카테고리** & **설명** & **링크 수** \\ \hline 성인 & 에로티시즘에서 하드 포르노에 이르는 성인 웹사이트 & 4516478 \\ 피싱 & 피싱 웹사이트, 멀웨어 등 & 42445 \\ 데이트 & 데이트 웹사이트 & 3829 \\ 갬블링 & 온라인 카지노 & 1365 \\ 파일 호스팅 & 파일, 동영상, 사진, 음악을 호스팅하는 웹사이트 & 909 \\ ddos & ddos 공격과 관련된 웹사이트 & 421 \\ 공격적 & 증오, 인종차별 등 & 390 \\ 채팅 & 온라인 채팅 웹사이트 & 244 \\ 혼합 성인 & 일부 성인 콘텐츠가 포함된 웹사이트 & 153 \\ ariel & 프랑스 규제 도박 웹사이트 & 69 \\ \hline \hline \end{tabular}
\end{table}
표 13: **성인 또는 악성 콘텐츠, 스팸 또는 비정형 텍스트가 포함될 가능성이 높은 카테고리를 선택합니다.**ToxicBERT가 보고한 상위 검색어를 기반으로 데이터를 수동으로 검사하여 목록을 큐레이션했습니다. 엄격한 하위 단어 매칭의 경우 성인 콘텐츠와 명백히 관련된 단어(예: 그룹섹스)를 포함시켰습니다. 중립적인 단어(예: 매사추세츠)의 일부일 수 있는 부분적으로 불분명한 일치(예: 엉덩이)는 피했습니다. 부드러운 단어 목록에는 문서를 폐기할 충분한 이유가 되지는 않지만 목록의 여러 단어가 일치할 경우 의심스러운 단어를 포함시켰습니다. 이렇게 하면 의료 또는 법률 콘텐츠에 영향을 미치지 않고 유지하는 데 도움이 됩니다(예: 딕의 단일 일치).