In this subsection, we present a few examples of duplicate-driven clusters, which are clusters that are very dense and near centroids. We find that these clusters tend to be filled with semantic duplicates and/or duplicated text. We generally can find such extreme duplicate-driven clusters by looking at clusters whose standard deviation of cosine distance to cluster centroid is less than 0.03. This is essentially looking at clusters in the lower tail of the empirical CDF in Figure 7 (brown line).
이 하위 섹션에서는 중복으로 인해 발생하는 클러스터, 즉 매우 밀집되어 있고 중심에 가까운 클러스터의 몇 가지 예를 제시합니다. 이러한 클러스터는 의미론적 중복 및/또는 중복된 텍스트로 채워지는 경향이 있다는 것을 발견했습니다. 일반적으로 이러한 극단적인 중복 중심 클러스터는 클러스터 중심과의 cosine distance 표준 편차가 0.03 미만인 클러스터를 살펴봄으로써 찾을 수 있습니다. 이는 본질적으로 그림 7의 경험적 CDF의 하위 꼬리(갈색 선)에 있는 클러스터를 살펴보는 것입니다.
이 하위 섹션에서는 중복으로 인해 발생하는 클러스터, 즉 매우 밀집되어 있고 중심에 가까운 클러스터의 몇 가지 예를 제시합니다. 이러한 클러스터는 의미론적 중복 및/또는 중복된 텍스트로 채워지는 경향이 있다는 것을 발견했습니다. 일반적으로 이러한 극단적인 중복 중심 클러스터는 클러스터 중심과의 코사인 거리 표준 편차가 0.03 미만인 클러스터를 살펴봄으로써 찾을 수 있습니다. 이는 본질적으로 그림 7의 경험적 CDF의 하위 꼬리(갈색 선)에 있는 클러스터를 살펴보는 것입니다.