As mentioned in Section 3.4, we hypothesize that sparsifying dense regions of space containing excessive semantic duplicates improves the clustering quality and is, therefore, critical to the performance of D4. To isolate the effect of re-clustering on D4, we run experiments with a version of D4 where we remove the re-clustering step (e.g. we keep the original clustering). As shown in Figure 7, omitting the re-clustering step significantly worsens performance, and we observe in the rightmost plot of Figure 7 that SemDeDup indeed removes extremely dense clusters surrounding centroids (e.g. duplicate-driven clusters). We analyze this in more depth in Section A.9.
3.4절에서 언급했듯이, 과도한 의미 중복이 포함된 공간의 밀집 영역을 sparsifying하면 클러스터링 품질이 향상되므로 D4의 성능에 매우 중요하다고 가설을 세웁니다. re-clustering이 D4에 미치는 영향을 분리하기 위해 re-clustering 단계를 제거한 D4 버전(예: 원래 클러스터링을 유지)으로 실험을 실행합니다. 그림 7에서 볼 수 있듯이 re-clustering 단계를 생략하면 성능이 현저히 저하되며, 그림 7의 가장 오른쪽 플롯에서 SemDeDup이 실제로 중심을 둘러싼 매우 밀집된 클러스터(예: 중복으로 인한 클러스터)를 제거하는 것을 관찰할 수 있습니다. 이에 대해 섹션 A.9에서 더 자세히 분석합니다.
3.4절에서 언급했듯이, 과도한 의미 중복이 포함된 공간의 밀집 영역을 희소화하면 클러스터링 품질이 향상되므로 D4의 성능에 매우 중요하다고 가설을 세웁니다. 재클러스터링이 D4에 미치는 영향을 분리하기 위해 재클러스터링 단계를 제거한 D4 버전(예: 원래 클러스터링을 유지)으로 실험을 실행합니다. 그림 7에서 볼 수 있듯이 재클러스터링 단계를 생략하면 성능이 현저히 저하되며, 그림 7의 가장 오른쪽 플롯에서 SemDeDup이 실제로 중심을 둘러싼 매우 밀집된 클러스터(예: 중복으로 인한 클러스터)를 제거하는 것을 관찰할 수 있습니다. 이에 대해 섹션 A.9에서 더 자세히 분석합니다.